rabbitmq - RabbitMQ 性能不佳

Question

我们在RabbitMQ集群中面临着糟糕的性能。即使在闲置的时候。

安装rabbitmq-top 插件后，我们会看到许多进程的减少量/秒非常高。100k 甚至更多！

问题：

• 这是什么意思？
• 如何控制它？
• 什么可能导致这种缓慢而没有任何错误？

笔记：

• 我们的集群在 Kubernetes 1.15.11 上运行
• 我们分配了 3 个节点，每个节点有 8 个 CPU 和 8 GB 限制。将 vm_watermark 设置为 7G。实际使用量约为 1.5 CPU 和 1 GB RAM
• 兔MQ 3.8.2。二郎22.1
• 我们没有很多消费者和生产者。缓慢也在相当空闲的环境中
• rabbitmqctl status返回详细信息的速度非常慢（有时需要 2 分钟），但没有显示任何错误

标签： rabbitmqerlangrabbitmqctl

Answer 1

经过一番调查，我们发现真正的原因是由两个问题组成的。

1. 默认情况下，RabbitMQ (Erlang) 运行时配置（使用bitnami helm chart）仅分配一个scheduler。这对于一些具有几个并发连接的简单应用程序很有用。具有 1000 个连接的生产级必须使用更多的调度程序。从 1 个调度程序增加到 8 个调度程序显着提高了吞吐量。
2. 我们的监控以每秒大量请求（大约 100 个/秒）对 RabbitMQ 进行了重击。监控点击aliveness-test创建连接、声明队列（未镜像）、发布消息然后使用该消息。禁用监控会显着降低负载。CPU使用率下降 80%-90%，每秒减少量也下降了约 90%。

参考

表现：

• https://www.rabbitmq.com/runtime.html#scheduling
• https://www.rabbitmq.com/blog/2020/06/04/how-to-run-benchmarks/
• https://www.rabbitmq.com/blog/2020/08/10/deploying-rabbitmq-to-kubernetes-whats-involved/
• https://www.rabbitmq.com/runtime.html#cpu-reduce-idle-usage

监控：

• http://rabbitmq.1065348.n5.nabble.com/RabbitMQ-API-aliveness-test-td32723.html
• https://groups.google.com/forum/#!topic/rabbitmq-users/9pOeHlhQoHA
• https://www.rabbitmq.com/monitoring.html