Infinispan 集群 REPL_ASYNC 缓存：命令在两个节点之间无限期弹跳

Question

我在 2 节点集群中使用 infinispan 10.1.8 运行 Spring Boot 应用程序。 这两个节点通过 jgroups TCP 进行通信。 我配置了几个 REPL_ASYNC。

问题：这些缓存之一在某些时候会导致两个节点一遍又一遍地交换相同的消息，从而导致 CPU 和内存使用率过高。 阻止这种情况的唯一方法是停止两个节点之一。

更多细节，这里是配置。

 org.infinispan.configuration.cache.Configuration replAsyncNoExpirationConfiguration = new ConfigurationBuilder()
                .clustering()
                    .cacheMode(CacheMode.REPL_ASYNC)
                .transaction()
                    .lockingMode(LockingMode.OPTIMISTIC)
                .transactionMode(TransactionMode.NON_TRANSACTIONAL)
                .statistics().enabled(cacheInfo.isStatsEnabled())
                .locking()
                    .concurrencyLevel(32)
                    .lockAcquisitionTimeout(15, TimeUnit.SECONDS)
                    .isolationLevel(IsolationLevel.READ_COMMITTED)
                .expiration()
                    .lifespan(-1) //entries do not expire
                    .maxIdle(-1) // even when they are idle for some time
                    .wakeUpInterval(-1) // disable the periodic eviction process
                .build();

这些缓存之一（名为formConfig ）导致我两个节点之间的通信异常，这就是发生的情况：

1. 使用 jmeter 我生成仅针对节点 1 的流量负载
2. 一段时间内，节点 2 通过 SingleRpcCommand 从节点 1 接收缓存条目，没有异常，即使formConfig缓存行为正常
3. 一段时间后，一个新的缓存条目被发送到formConfig缓存

此时，相同的消息似乎在两个节点之间不断跳动：

• 节点 1 向mn-node1.company.acme-develop sending command to all: SingleRpcCommand{cacheName='formConfig', command=PutKeyValueCommand{key=SimpleKey [form_config,MECHANICAL,DESIGN,et,7850]发送条目mn-node1.company.acme-develop sending command to all: SingleRpcCommand{cacheName='formConfig', command=PutKeyValueCommand{key=SimpleKey [form_config,MECHANICAL,DESIGN,et,7850]
• 节点 2 接收条目mn-node2.company.acme-develop received command from mn-node1.company.acme-develop: SingleRpcCommand{cacheName='formConfig', command=PutKeyValueCommand{key=SimpleKey [form_config,MECHANICAL,DESIGN,et,7850]
• 节点 2 将条目发送回节点 1 mn-node2.company.acme-develop sending command to all: SingleRpcCommand{cacheName='formConfig', command=PutKeyValueCommand{key=SimpleKey [form_config,MECHANICAL,DESIGN,et,7850]
• 节点 1 接收条目mn-node1.company.acme-develop received command from mn-node2.company.acme-develop: SingleRpcCommand{cacheName='formConfig', command=PutKeyValueCommand{key=SimpleKey [form_config,MECHANICAL,DESIGN,et,7850],
• 节点 1 将条目发送到节点 2，依此类推……

其他一些事情：

• 系统没有负载，jmeter 并行运行只有少数用户
• 即使停止 jmeter 这个循环也不会停止
• formConfig是唯一以这种方式运行的缓存。 所有其他 REPL_ASYNC 缓存都正常工作。 我只停用了 formConfig 缓存，系统工作正常。
• 我无法在我的机器上运行两个节点时重现该问题

这是一个更完整的日志文件，包括来自两个节点的日志。

其他信息：

• opendjdk 11 热点
• 弹簧靴 2.2.7
• infinispan spring boot starter 2.2.4
• 使用JbossUserMarshaller

我怀疑

• 与事务配置相关的东西
• 或与缓存对象的序列化/反序列化相关的东西

Answer 1

唯一可能发生这种情况的情况是SimpleKey具有不同的hashCode() 。

日志中是否有任何异常？ 在序列化和反序列化密钥后，您是否能够检查hashCode()是否相同？