如何从Java EE批处理作业发送电子邮件

Question

我需要每天处理大量用户列表，以便根据某些情况向他们发送电子邮件和SMS通知。 我为此使用Java EE批处理模型。 我的Job xml如下：

<step id="sendNotification">
    <chunk item-count="10" retry-limit="3">
        <reader ref="myItemReader"></reader>
        <processor ref="myItemProcessor"></processor>
        <writer ref="myItemWriter"></writer>
        <retryable-exception-classes>
            <include class="java.lang.IllegalArgumentException"/>
        </retryable-exception-classes>
    </chunk>
</step>

MyItemReader的onOpen方法从数据库中读取所有用户，而readItem（）使用列表迭代器一次读取一个用户。 在myItemProcessor中，实际的电子邮件通知发送给用户，然后将用户保留在该块的myItemWriter类中的数据库中。

@Named
public class MyItemReader extends AbstractItemReader {

    private Iterator<User> iterator = null;
    private User lastUser;

    @Inject
    private MyService service;

    @Override
    public void open(Serializable checkpoint) throws Exception {
        super.open(checkpoint);

        List<User> users = service.getUsers();
        iterator = users.iterator();

        if(checkpoint != null) {
            User checkpointUser = (User) checkpoint;
            System.out.println("Checkpoint Found: " + checkpointUser.getUserId());
            while(iterator.hasNext() && !iterator.next().getUserId().equals(checkpointUser.getUserId())) {
                System.out.println("skipping already read users ... ");
            }
        }
    }

    @Override
    public Object readItem() throws Exception {

        User user=null;

        if(iterator.hasNext()) {
            user = iterator.next();
            lastUser = user;
        }
        return user;
    }

    @Override
    public Serializable checkpointInfo() throws Exception {
        return lastUser;
    }
}

我的问题是检查点存储了在上一个块中执行的最后一条记录。 如果我的下一个10个用户中有一个大块，并且第5个用户的myItemProcessor中抛出异常，则在重试时将执行整个块，并再次处理所有10个用户。 我不希望将通知再次发送给已经处理的用户。

有办法解决吗？ 应该如何有效地做到这一点？

任何帮助将不胜感激。 谢谢。

Answer 1

您当前的项目处理器正在执行块事务范围之外的操作，这导致应用程序状态不同步。 如果您的要求是仅在成功完成一个块中的所有项目之后才发送电子邮件，则可以将电子邮件发送部分移至ItemWriterListener.afterWrite（items） 。

Answer 2

我将以@cheng的评论为基础。 我在此感谢他，希望我的回答能为组织和有效介绍这些选项提供额外的价值。

答案：将消息排队等待另一个MDB发送，以发送电子邮件

背景：

正如@cheng指出的那样，失败意味着整个事务都会回滚，并且检查点不会前进。

那么，如何处理您的信息块已向某些用户而非全部用户发送电子邮件的事实呢？ （您可能会说它回滚了，但有“副作用”。）

因此，我们可以将您的问题重新声明为： 如何从批处理步骤发送电子邮件？

好吧，假设您有一种方法可以通过事务性API发送电子邮件（实现XAResource等），则可以使用该API。

假设您不这样做，我将对JMS队列进行事务性写入，然后使用单独的MDB发送电子邮件（如@cheng在他的评论之一中建议的那样）。

建议的替代方法：使用ItemWriter将消息发送到JMS队列，然后使用单独的MDB实际发送电子邮件

使用这种方法，您仍然可以通过批量处理和更新数据库来获得效率（无论如何一次只能发送一封电子邮件），并且可以从简单的检查点和重新启动中受益，而不必编写复杂的错误处理程序。

这也有可能作为批处理作业甚至批处理之外的模式重用。

其他选择

为了讨论起见，列出了一些我认为不太理想的其他想法：

添加跟踪通过电子邮件发送用户的批处理应用程序逻辑（使用ItemProcessListener）

您可以使用ItemProcessListener方法构建自己的成功/失败电子邮件列表，包括afterProcess和onProcessError 。

然后，在重新启动时，您可以知道当前块中已向哪些用户发送了电子邮件，自从整个块回滚以来，我们已经重新定位了哪些用户，即使已经发送了一些电子邮件。

这无疑使您的批处理逻辑变得复杂，并且您还必须以某种方式保留此成功或失败列表。 另外，这种方法可能非常针对此工作（而不是排队等待MDB处理）。

但这很简单，因为您只有一个批处理作业，而无需消息传递提供程序和单独的应用程序组件。

如果您走这条路线，则可能要同时使用可跳过和“无回滚”可重试异常。

单项块

如果使用item-count =“ 1”定义块，则可以避免复杂的检查点和错误处理代码。 但是，您牺牲了效率，因此只有在批处理的其他方面非常引人注目时，这才有意义：例如，通过通用接口进行作业的调度和管理，在作业失败的步骤中重新启动的能力

如果要走这条路线，您可能需要考虑将套接字和超时异常定义为“无回滚”异常（使用 ），因为回滚并没有任何好处，您可能想重试网络超时问题。

既然您特别提到了效率，我想这对您来说不合适。

使用事务同步

这也许可以工作，但是批处理API并没有使它变得特别容易，并且您仍然可能遇到块已完成但一个或多个电子邮件发送失败的情况。