繁体   English   中英

Spring 批处理似乎没有正确关闭项目编写器

[英]Spring batch doesn't seem to be closing item writers properly

我有一份工作,将每一项都写在一个单独的文件中。 为了做到这一点,作业使用了一个 ClassifierCompositeItemWriter,其 ClassifierCompositeItemWriter 为每个项目返回一个新的 FlatFileItemWriter(代码如下)。

    @Bean
    @StepScope
    public ClassifierCompositeItemWriter<ProcessorResult> writer(@Value("#{jobParameters['outputPath']}") String outputPath) {

        ClassifierCompositeItemWriter<MyItem> compositeItemWriter = new ClassifierCompositeItemWriter<>();
        
        compositeItemWriter.setClassifier((item) -> {
            
            String filePath = outputPath + "/" + item.getFileName();
            
            BeanWrapperFieldExtractor<MyItem> fieldExtractor = new BeanWrapperFieldExtractor<>();
            fieldExtractor.setNames(new String[]{"content"});
            
            DelimitedLineAggregator<MyItem> lineAggregator = new DelimitedLineAggregator<>();
            lineAggregator.setFieldExtractor(fieldExtractor);

            FlatFileItemWriter<MyItem> itemWriter = new FlatFileItemWriter<>();
            itemWriter.setResource(new FileSystemResource(filePath));
            itemWriter.setLineAggregator(lineAggregator);
            itemWriter.setShouldDeleteIfEmpty(true);
            itemWriter.setShouldDeleteIfExists(true);

            itemWriter.open(new ExecutionContext());
            return itemWriter;
            
        });
        
        return compositeItemWriter;

    }

以下是作业的配置方式:

    @Bean
    public Step step1() {
        return stepBuilderFactory
                .get("step1")
                .<String, MyItem>chunk(1)
                .reader(reader(null))
                .processor(processor(null, null, null))
                .writer(writer(null))
                .build();
    }

    @Bean
    public Job job() {
        return jobBuilderFactory
                .get("job")
                .incrementer(new RunIdIncrementer())
                .flow(step1())
                .end()
                .build();
    }

一切都很完美。 所有文件都按我的预期生成。 但是,无法删除其中一个文件。 只有一个。 如果我尝试删除它,我会收到一条消息,指出“OpenJDK 平台二进制文件”正在使用它。 如果我将块增加到比我生成的文件数量更大的大小,则无法删除任何文件。 似乎删除最后一个块中生成的文件存在问题,就像相应的编写器没有被 Spring Batch 生命周期或其他东西正确关闭一样。

如果我终止应用程序进程,我可以删除该文件。

我知道为什么会这样吗? 提前致谢!

PS:我称之为“itemWriter.open(new ExecutionContext());” 因为如果我不这样做,我会得到一个“org.springframework.batch.item.WriterNotOpenException:Writer 在写入之前必须打开”。

编辑:

如果有人遇到类似的问题,我建议阅读 Mahmoud 对这个问题Spring 批次的回答:ClassifierCompositeItemWriter footer not getting called

执行此操作时,您可能在步骤 scope 之外使用了 itemwriter:

 itemWriter.open(new ExecutionContext());

请检查此问题,希望这对您有所帮助。

暂无
暂无

声明:本站的技术帖子网页,遵循CC BY-SA 4.0协议,如果您需要转载,请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.

 
粤ICP备18138465号  © 2020-2024 STACKOOM.COM