Celery: 미리 포크된 작업자 프로세스가 TERM 신호를 무시할 수 있습니까?

에 만든 2018년 06월 04일 · 3코멘트 · 출처: celery/celery

일반적인

영향을 받는 버전: 최신(4.1.1)

예상되는 행동

prefork된 작업자는 sigterm 신호를 무시합니다. 웜 종료를 담당하는 상위 프로세스만 이에 반응하고 하위 프로세스를 정상적으로 종료합니다.

현재 행동

prefork된 작업자 프로세스가 sigterm을 받으면 즉시 종료됩니다(예: kill <pid> ).

celery_1        | [2018-06-04 09:19:57,376: ERROR/MainProcess] Process 'ForkPoolWorker-2' pid:26 exited with 'signal 15 (SIGTERM)'

sigterm이 상위 작업자 프로세스에 도달하면 웜 종료가 수행됩니다. 그 동안 prefork된 작업자도 기간 신호를 받으면 작업이 종료됩니다.

가능한 해결책

prefork된 작업자 프로세스가 sigterm을 무시하도록 허용하는 기능을 추가할 수 있습니까?

Deployment Prefork Workers Pool

출처

croth1

가장 유용한 댓글

도움이 되는 제안을 해주신 @georgepsarakis 와 @xirdneh 에게 감사드립니다. 나는 감독자와 함께 작업 설정을 얻을 수 있었다! 🎉
컨테이너당 작업자가 1명인 것도 매우 좋은 제안입니다! 정말 감사합니다!

croth1 에 2018년 06월 04일

🎉3

모든 3 댓글

Docker 컨테이너 내에서 여러 프로세스를 시작할 때 적절한 신호 전파를 가지려면 아마도 supervisord 와 같은 프로세스 관리자가 필요할 것입니다.

georgepsarakis 에 2018년 06월 04일

자세한 내용은 도커가 작업을 중지하는 방법에 대한 개요입니다. https://www.ctl.io/developers/blog/post/gracefully-stopping-docker-containers/#docker -stop

또한 이미 docker를 사용하고 있다면 컨테이너당 하나의 작업자를 실행하는 것이 좋습니다.
관리가 더 쉽고 컨테이너에 많은 오버헤드가 없습니다. 또한 k8s와 같은 도구를 사용할 때 자동 크기 조정을 수행하는 것이 더 쉽습니다.

마지막 한가지. 여러 작업자를 관리하기 위해 자신의 bash 스크립트를 실행하려면 각 작업자를 실행한 다음 SIGTERM이 나타날 때까지 무기한 잠 을
그런 일이 발생하면 가서 작업자 PID를 얻은 다음 각각을 정상적으로 중지할 수 있습니다.
기본적으로 무엇을 어느 supervisord @georgepsarakis는 지적한다.

xirdneh 에 2018년 06월 04일