java - 在spring批处理器中执行查询
问题描述
在我的项目中,我需要在Spring Batch处理器中执行查询以验证某些字段。
我怎样才能做到这一点?
编辑:添加来源:
这是步骤的定义:
@Bean
public Step step1(JdbcBatchItemWriter<CaricoDTO> step1Writer) {
return stepBuilderFactory.get("step1").<CaricoDTO, CaricoDTO>chunk(10).reader(multiResourceItemReader())
.processor(processorStep1()).writer(step1Writer).build();
}
这是 的定义multiResourceItemReader
:
@Bean
public MultiResourceItemReader<CaricoDTO> multiResourceItemReader() {
MultiResourceItemReader<CaricoDTO> resourceItemReader = new MultiResourceItemReader<CaricoDTO>();
ArrayList<Integer> indexesToRemove = new ArrayList<Integer>();
Resource[] inputResources = null;
PathMatchingResourcePatternResolver patternResolver = new PathMatchingResourcePatternResolver();
try {
inputResources = patternResolver.getResources(inputPath);
} catch (IOException e) {
e.printStackTrace();
}
resourceItemReader.setResources(inputResources);
resourceItemReader.setDelegate(step1Reader());
resourceItemReader.setComparator(new FileComparator());
return resourceItemReader;
}
这是step1Reader
:
@Bean
public FlatFileItemReader<CaricoDTO> step1Reader() {
FlatFileItemReader<CaricoDTO> reader = new FlatFileItemReader<CaricoDTO>();
reader.setLinesToSkip(1);
reader.setLineMapper(new DefaultLineMapper<CaricoDTO>() {
{
setLineTokenizer(new DelimitedLineTokenizer("|") {
{
setNames(new String[] { ..... });
}
});
setFieldSetMapper(new BeanWrapperFieldSetMapper<CaricoDTO>() {
{
setTargetType(CaricoDTO.class);
}
});
}
});
return reader;
}
这是我的处理器 bean:
@Bean
public CaricoDTOItemProcessorStep1 processorStep1() {
CaricoDTOItemProcessorStep1 processorStep1 = new CaricoDTOItemProcessorStep1();
return processorStep1;
}
这是我的处理器定义:
public class CaricoDTOItemProcessorStep1 implements ItemProcessor<CaricoDTO, CaricoDTO> {
private String fileName;
private static final Logger log = LoggerFactory.getLogger(CaricoDTOItemProcessorStep1.class);
@Override
public CaricoDTO process(CaricoDTO carico) throws Exception {
carico.setDataCaricamento(new Date(System.currentTimeMillis()));
carico.setFileName(carico.getResource().getFilename());
return carico;
}
public String getFileName() {
return fileName;
}
public void setFileName(String fileName) {
this.fileName = fileName;
}
}
这是我的作家:
@Bean
public JdbcBatchItemWriter<CaricoDTO> step1Writer(DataSource dataSource) {
return new JdbcBatchItemWriterBuilder<CaricoDTO>()
.itemSqlParameterSourceProvider(new BeanPropertyItemSqlParameterSourceProvider<>())
.sql(....)
.dataSource(dataSource).build();
}
解决方案
鉴于主要 OP 中的一些细节,我假设通用解决方案将被接受。
给定一个经典的Spring Batch项目设置,您应该可以访问org.springframework.jdbc.core.JdbcTemplate
连接到目标的 bean javax.sql.DataSource
,您可以简单地将其注入您的批处理协作器组件之一:
org.springframework.batch.item.ItemReader
org.springframework.batch.item.ItemWriter
org.springframework.batch.item.ItemProcessor
假设您需要在继续处理项目之前执行一些验证(并且可以选择丢弃它),您可以注入JdbcTemplate
bean,执行查询以验证模型不变量,然后相应地继续:
public class CaricoDTOItemProcessorStep1 implements ItemProcessor<CaricoDTO, CaricoDTO> {
@Autowired
private JdbcTemplate jdbcTemplate;
private String fileName;
private static final Logger log = LoggerFactory.getLogger(CaricoDTOItemProcessorStep1.class);
@Override
public CaricoDTO process(CaricoDTO item) throws Exception {
boolean someValue = jdbcTemplate.queryForObject("SELECT some_field FROM some_table WHERE some_other_field = 0", (rs, rowNum) -> rs.getBoolean(0));
if (someValue) {
carico.setDataCaricamento(new Date(System.currentTimeMillis()));
carico.setFileName(carico.getResource().getFilename());
return carico;
} else {
return null; // causes the item to be discarded from processing
}
}
}
不用说,您的查询将取决于您的域用例并且需要更新。
推荐阅读
- python - 如何在 python 中编写一个在字符串的第一个句点处停止的正则表达式,该字符串具有不可预测的字符类型?
- sql - 在宏的查询中使用来自工作表的输入
- java - btw MVEL.eval 和 MVEL.executeExpression 的区别
- firebase - 无法从firebase读取数据作为android中的列表
- angular - Angular 6 - 访问函数外部变量不起作用
- laravel - 从 MailMessage 对象获取内容
- web - 如何在浏览器中打开开发人员工具以获取快速自动关闭的选项卡
- java - 如何正确拆除 Junit 测试规则 (DropwizardAppRule)
- javascript - 在对象上设置单个属性
- objective-c - 在Objective C Cocoa中将数组从NSViewController传递给NSView