spring-boot - Infinispan 集群 REPL_ASYNC 缓存：命令在两个节点之间无限期反弹

问题描述

我在 2 节点集群中使用 infinispan 10.1.8 运行 Spring Boot 应用程序。2 个节点通过 jgroups TCP 进行通信。我配置了几个 REPL_ASYNC。

问题：这些缓存之一在某些时候导致两个节点一遍又一遍地交换相同的消息，从而导致 CPU 和内存使用率很高。阻止这种情况的唯一方法是停止两个节点之一。

更多细节，这里是配置。

 org.infinispan.configuration.cache.Configuration replAsyncNoExpirationConfiguration = new ConfigurationBuilder()
                .clustering()
                    .cacheMode(CacheMode.REPL_ASYNC)
                .transaction()
                    .lockingMode(LockingMode.OPTIMISTIC)
                .transactionMode(TransactionMode.NON_TRANSACTIONAL)
                .statistics().enabled(cacheInfo.isStatsEnabled())
                .locking()
                    .concurrencyLevel(32)
                    .lockAcquisitionTimeout(15, TimeUnit.SECONDS)
                    .isolationLevel(IsolationLevel.READ_COMMITTED)
                .expiration()
                    .lifespan(-1) //entries do not expire
                    .maxIdle(-1) // even when they are idle for some time
                    .wakeUpInterval(-1) // disable the periodic eviction process
                .build();

这些缓存之一（名为formConfig）导致我在两个节点之间进行异常通信，这就是发生的情况：

使用 jmeter 我生成仅针对节点 1 的流量负载
一段时间以来，节点 2 通过 SingleRpcCommand 从节点 1 接收缓存条目，没有异常，甚至formConfig缓存行为正常
一段时间后，一个新的缓存条目被发送到formConfig缓存

此时，相同的消息似乎在两个节点之间不断反弹：

节点 1 发送条目mn-node1.company.acme-develop sending command to all: SingleRpcCommand{cacheName='formConfig', command=PutKeyValueCommand{key=SimpleKey [form_config,MECHANICAL,DESIGN,et,7850]
节点 2 接收条目mn-node2.company.acme-develop received command from mn-node1.company.acme-develop: SingleRpcCommand{cacheName='formConfig', command=PutKeyValueCommand{key=SimpleKey [form_config,MECHANICAL,DESIGN,et,7850]
节点 2 将条目发送回节点 1mn-node2.company.acme-develop sending command to all: SingleRpcCommand{cacheName='formConfig', command=PutKeyValueCommand{key=SimpleKey [form_config,MECHANICAL,DESIGN,et,7850]
节点 1 接收条目mn-node1.company.acme-develop received command from mn-node2.company.acme-develop: SingleRpcCommand{cacheName='formConfig', command=PutKeyValueCommand{key=SimpleKey [form_config,MECHANICAL,DESIGN,et,7850],
节点 1 将条目发送到节点 2，依此类推……

其他一些事情：

系统未负载，jmeter 仅并行运行少数用户
即使停止 jmeter 这个循环也不会停止
formConfig是唯一以这种方式运行的缓存。所有其他 REPL_ASYNC 缓存都正常工作。我只停用了 formConfig 缓存并且系统工作正常。
我无法重现在我的机器上运行的两个节点的问题

这是一个更完整的日志文件，包括来自两个节点的日志。

其他信息：

opendjdk 11 热点
弹簧靴 2.2.7
infinispan 弹簧靴启动器 2.2.4
使用JbossUserMarshaller

我怀疑

与事务配置有关的东西
或与缓存对象的序列化/反序列化有关的东西

标签： spring-bootcachingcluster-computinginfinispan

spring-boot - Infinispan 集群 REPL_ASYNC 缓存：命令在两个节点之间无限期反弹

问题描述

解决方案

推荐阅读