celery 出错记录

问题1：具体错误如下：

Currently using celery for my django but get error kombu.exceptions.OperationalError: [Errno 111] Connection refused

解决思路：

在当前应用下，也就是 app/__init__.py 里加入下列内容，问题解决

from .celery import app as CRM_CELERY_APP

__all__ = ["CRM_CELERY_APP"]

来源：Currently using celery for my django but get error kombu.exceptions.OperationalError: [Errno 111] Connection refused · Issue #1582 · celery/kombu · GitHub

问题2：

kombu.exceptions.EncodeError: TypeError('Object of type ContentBlock is not JSON serializable')

这个问题在于 celery 不能传输那些不能序列化的数据，简单的说就是传输对象必须是基本类型，也就是 string，list 这些。

可以尝试在 task 中对你将要返回的数据进行一次 json.dumps(data)

比如我这样：

@shared_task(bind=True, max_retries=10, default_retry_delay=300)
def send_api_request(self,xxxx):
        # 省略业务代码
        # 这里对 message 对象进行处理，以确保所有数据都是可序列化的
        data = get_avilable_content(message)
        # 尝试序列化
        try:
            json.dumps(data)
        except TypeError as e:
            print("Data is not JSON serializable:", e)

        return data


def get_avilable_content(message):
    # 因为 message 是一个对象，所以我们对他进行一些处理，构造一个字典里面保存需要的东西
    content_text = message.content[0].text

    data = {
        "id": message.id,
        "content": content_text,
    }
    return data

还有别的解决方式可能对你有用：

这是因为你正在使用 JSON 序列化程序进行任务序列化（如设置所示）

CELERY_TASK_SERIALIZER = 'json'

您有两个选择：

1）不要传递实例，传递实例的主键，然后在任务中查找对象。

2）改用pickle任务序列化器。 这将允许您将对象作为参数传递给任务并返回它们，但也有其自身的安全问题。

问题2的原文：python - kombu.exceptions.EncodeError: User is not JSON serializable - Stack Overflow

问题3：

celery.exceptions.NotRegistered:

（1）原因是 celery 没有启动，或者说需要先启动  celery 再启动 django 服务。

（2）如果不是这个原因可以看一下 celery.py 里面有没有设置，如下是我的配置

# celery.py
from __future__ import absolute_import, unicode_literals
import os
from celery import Celery

os.environ.setdefault('DJANGO_SETTINGS_MODULE', 'xxxx.settings')

app = Celery('xxxx')

app.config_from_object('django.conf:settings', namespace='CELERY')

# 关键是这行，自动读取任务
app.autodiscover_tasks()