RabbitMQ允许消费者每次从队列中取任意数量的message
celery中具体怎么个流程参考官方文档(链接)
官方文档中给的关闭预取的方法是在启动worker时加上参数-O fair,但是这个方法不好使(好使就不会有这篇博客了)至于为什么,我也不知道,毕竟我就是个小菜鸡,在我试了无数次之后发现下面的方法是好使的:
在配置文件中添加一下三行代码
CELERY_ACK_LATE = True
CELERYD_PREFETCH_MULTIPLIER = 1
CELERYD_CONCURRENCY = 1
我的task中的工作时执行测试用例,因此需要很长一段时间,这就可能导致下面的问题
我自己理解是心跳检测的问题,由于客户端正在执行用例无法给服务器端回复导致服务器端认为这个链接出现了问题,任务无法完成,于是将这个任务重新分配给其他的空闲的worker,解决这个问题的办法由两个:
1,将心跳检测时间间隔设置长一点
–heartbeat-interval
2,关闭心跳检测
–without-heartbeat
可以根据自己情况选择方法