[memory-management] 减少RabbitMQ内存使用量


Answers

确保设置适当的QoS预取值。 默认情况下,如果有客户端,Rabbit服务器会将其为该客户端队列发送的任何消息发送给客户端。 这导致客户端和服务器上的大量内存使用。

将预取限制降低到合理的范围,例如100,并且Rabbit会将剩余的消息保留在服务器上的磁盘上,直到客户端真正准备好处理它们,并且您的内存使用量将在客户端和服务器。

请注意,100的建议只是一个合理的起点 - 它确实胜过无穷大。 要真正优化该数字,您需要考虑客户端能够处理的消息/秒,网络的延迟以及每条消息的平均大小。

Question

我试图在一个小型VPS(512mb RAM)上运行RabbitMQ以及Nginx和其他一些程序。 我已经能够毫无困难地调整其他所有内存的使用情况,但我似乎无法让RabbitMQ使用更少的RAM。

我想我需要减少Erlang用于RabbitMQ的线程数,但是我无法让它工作。 我也尝试将vm_memory_high_watermark设置为低于默认值(40%)的几个不同值,甚至低至5%。

部分问题可能是VPS提供程序(MediaTemple)允许我查看我分配的内存,因此当使用free或top时,它显示服务器大约有900mb。

有任何建议可以减少RabbitMQ的内存使用量,或者限制Erlang创建的线程数量吗? 我相信Erlang正在使用30个线程,基于我在进程命令中看到的-A30标志。

理想情况下,我希望RabbitMQ内存使用率低于100mb。

编辑:

vm_memory_high_watermark设置为5%(或配置文件中为0.05),RabbitMQ日志报告RabbitMQ的内存限制设置为51mb。 我不确定51mb来自哪里。 当前VPS分配的内存为924mb,因此其中5%应为46mb左右。

根据启动RabbitMQ之前的htop / free,我坐着大约453mb的二手ram,在启动RabbitMQ之后,我大约650mb。 增加近200mb。 可能是200MB是RabbitMQ运行的下限吗?

编辑2

下面是启动RabbitMQ之前和之后ps aux和free的一些截图 ,以及显示RabbitMQ启动时内存峰值的图表。

编辑3

我也检查没有启用插件,它没有什么区别。 似乎我拥有的插件(管理及其先决条件)仅增加了大约8mb的ram使用量。

编辑4

我不再需要使用此服务器进行测试,但是,有一个conf设置delegate_count设置为默认值16.据我所知,这为rabbitmq产生了16个sup-procs。 在较小的服务器上降低此数字可能有助于减少内存占用。 不知道这是否真的有效,或者它如何影响性能,但这是值得尝试的。




Related