Celery: RunTimeError: 제어 검사를 사용하려고 닫힌 풀에서 획득

체크리스트

• [x] 문제에 celery -A proj report 의 출력을 포함했습니다.
  (이 작업을 수행할 수 없는 경우 최소한 Celery를 지정하십시오.
  영향을 받는 버전).

소프트웨어 -> celery:4.0.2 (latentcall) kombu:4.1.0 py:2.7.13 또는 (py:2.7.12)
당구:3.5.0.3 redis:2.10.5
플랫폼 -> 시스템:다윈 아치:64비트 임프:CPython . (보통: system:Linux arch:64bit, ELF)
로더 -> celery.loaders.app.AppLoader
설정 -> 전송: redis 결과: redis // localhost:6380/

BROKER_TRANSPORT_OPTIONS: {
'fanout_patterns': True, 'fanout_prefix': True}
CELERY_TASK_COMPRESSION: 'gzip'
CELERY_TIMEZONE: 'UTC'
CELERY_RESULT_SERIALIZER: 'json'
CELERY_BROKER_URL: u' redis://localhost :6380//'
CELERY_TASK_SERIALIZER: 'json'
CELERY_RESULT_EXPIRES: 60
CELERY_ACCEPT_CONTENT: ['애플리케이션/json']
TIME_ZONE: 'UTC'
CELERY_MESSAGE_COMPRESSION: 'gzip'
CELERY_TASK_ALWAYS_EAGER: 거짓
CELERY_RESULT_BACKEND: u' redis://localhost :6380/'

• [x] Celery의 master 분기에 문제가 있음을 확인했습니다.

셀러리 4.1.0에서도 발생합니다.

재현 단계

control 모듈을 사용해 보십시오. 제 경우에는 active_queues() 받고 있습니다.

예상되는 행동

시스템이 양호한 상태에 있는 한 control 모듈 내에서 정보를 얻을 수 있어야 합니다. 수영장이 닫힐 때도 있고 닫지 않을 때도 있는 이유를 정확히 이해하지 못합니다.

실제 행동

이것은 #1839에서와 같은 문제일 수 있습니다.

코드에 런타임 오류가 발생하므로 셀러리에서 필요한 데이터를 쿼리할 수 없습니다.

File "/.../tasks.py", line 80, in workers_on_queue
    for k, v in six.viewitems(celery_app.control.inspect().active_queues()):
  File "/.../lib/python2.7/site-packages/celery/app/control.py", line 116, in active_queues
    return self._request('active_queues')
  File "/.../lib/python2.7/site-packages/celery/app/control.py", line 81, in _request
    timeout=self.timeout, reply=True,
  File "/.../lib/python2.7/site-packages/celery/app/control.py", line 436, in broadcast
    limit, callback, channel=channel,
  File "/.../lib/python2.7/site-packages/kombu/pidbox.py", line 315, in _broadcast
    serializer=serializer)
  File "/.../lib/python2.7/site-packages/kombu/pidbox.py", line 285, in _publish
    with self.producer_or_acquire(producer, chan) as producer:
  File "/usr/local/Cellar/python/2.7.13_1/Frameworks/Python.framework/Versions/2.7/lib/python2.7/contextlib.py", line 17, in __enter__
    return self.gen.next()
  File "/.../lib/python2.7/site-packages/kombu/pidbox.py", line 247, in producer_or_acquire
    with self.producer_pool.acquire() as producer:
  File "/.../lib/python2.7/site-packages/kombu/resource.py", line 74, in acquire
    raise RuntimeError('Acquire on closed pool')

이것은 control 모듈을 사용할 때만 발생합니다. 때로는 제대로 작동합니다.

이 코드 경로는 재시도 루프에도 있으므로 결국 실행에 실패했습니다.