要清楚:RabbitMQ消息的存储机制以及队列的结构,下面这篇文章写的很详细。
https://blog.csdn.net/weixin_30391339/article/details/95013185
在公司接手了别人写的项目,其中有用到rabbitMq作为消息队列。该项目中涉及到图片转为base64码。
这个项目中rabbitmq每天都会有消息产生和消费。久了之后,linux服务器磁盘爆满,查找很多原因,领导让我更改mysql安装位置,清理磁盘,重装rabbitMq等等。这时我也是第一在实战上接触rabbitMq,一时也不知道问题所在。后来发现rabbitMq的存储消息的目录(/home/boco4a/rabbitmq/rabbitmq_server-3.7.10/var/lib/rabbitmq/mnesia/rabbit@ZJHZ-BJ-CXPT1/msg_stores/vhosts/628WB79CIFDYO9LJI6DKMI09L/msg_store_persistent),占磁盘大小41G,刚开始以为rabbitmq的消息存储这么夸张,于是查找怎么对已被消费的消息进行销毁删除等操作(这个rabbitMq会在一定规则下触发垃圾回收进行删除消息存储的)。我在尝试各种办法测试和实现这个将已被消费的消息进行删除的时候,我发现该项目的消息大小较大,原因是开发将图片转为的base64码放到队列里面了,这样每条消息都很大,都会进行消息存储,会引起内存爆炸式的增长。我改为将图片路径放到消息队列里,消费者消费消息之后拿到图片路径再进行base64转码。这样消息大大减小,而rabbitMq就是较小的消息存储在rabbit_queue_index中而较大的消息存储在rabbit_msg_store中,改了之后,我们的消息就不会存储在rabbit_msg_store中了,这样就解决了问题。