使用弹簧批同时处理所有生产线

Question

我正在编写一个批处理程序，使用 Spring 批处理，它从 Db 读取，然后将信息写入 csv 文件。 我之前已经使用过这个框架，但是我编写的所有其他程序都具有相同的结构：
1- 从数据库中读取一行；
2- 单独处理生产线；
3- 将行写入文件；
但是这个新程序有一个不同的逻辑：我需要从 Db 中读取行，我必须处理所有这些行（例如，如果我在字段 A 中发现多行具有相同的值，我只需要打印一行字段 B 是其他行的字段 B 的总和），然后我必须写。 是否可以使用 Spring Batch 做这样的事情？ （我发现的任何示例都适用于单行）。
谢谢。

Answer 1

除了使用块（读取器、写入器、处理器）之外，Spring Batch 还可以与Tasklets 一起使用。 Tasklet 本质上是一种方法，它可以做所有事情。

public class YourTasklet implements Tasklet {


    public RepeatStatus execute(StepContribution contribution,
                                ChunkContext chunkContext) throws Exception {


        // TODO do everything you want here 
        return RepeatStatus.FINISHED;
    }


}

您可能想阅读官方文档中的tasklet 。

Answer 2

聚合函数需要处理整个数据集才能进行计算。 面向块的处理模型对于实现这种功能不是很友好，因为数据是在单独的块中处理的。

在您的情况下，由于数据是从数据库中读取的，我会将分组/求和留给数据库，例如select sum(fieldB) ... group by fieldB 。 数据库针对此类任务进行了很好的优化，您最终应该为每个组读取一条记录。