芹菜不使用所有并发插槽(Celery not using all concurrent slots)

2019-10-19 18:52发布

我有一个8核处理器制造的机器的一个芹菜集群。 的每个机器具有被设定为8(C8)并发因素一个工人。

我经常看到的节点有很多的保留任务,但只有一个或两个同时运行。 我的任务通常有很多的计算和I / O的长时间运行。

任何想法,为什么发生这种情况,并且我能做些什么来提高任务的数量同时运行? 是否芹菜油门根据系统负载的活动任务数? 我通过文档看了,但短了上来。

Answer 1:

由于香蕉 ,我想我找到了答案。

我的一些任务是产卵子流程,其中芹菜在它的并发计算。



文章来源: Celery not using all concurrent slots