Gunicorn: multiprocessing.cpu_count() é perigoso em contêineres
Devido a https://bugs.python.org/issue36054 , a recomendação nesses documentos é perigosa ao executar dentro de um contêiner. Se seu contêiner foi alocado (digamos) um único núcleo e 512 MB de RAM em uma máquina com 64 núcleos, multiprocessing.cpu_count() pensa que tem 64 núcleos em vez de apenas 1, e você acaba gerando 129 trabalhadores. Isso é muito mais do que o contêiner tem recursos e acaba causando falhas de memória.
twosigmajab
Todos 4 comentários
Olá 😄! Obrigado pela notificação.
O padrão no Gunicorn é um único trabalhador, mesmo que a documentação tenha um exemplo de detecção do número. Dado que isso parece ser uma correção de bug do Python eventualmente, não tenho certeza se há algo que devamos fazer em particular aqui. No entanto, arquivá-lo a jusante no frasco-gunicorn faz muito sentido.
tilgovi
em 2 mai. 2019
é mais algo que deve ser corrigido em python, não é realmente um problema. A documentação foi feita no momento em que o docker nem existia, mas acho que ainda é útil para o exemplo, pois é muito explícito. Fechando o assunto então.
benoitc
em 23 mai. 2019
Adicionar 1 pequena linha aos documentos para dizer ("mas cuidado com o BPO-36054 se estiver usando contêineres!") pode salvar muitas dores de cabeça de usuários pelos ~ anos em que ainda usarão versões do Python que não têm isso corrigido. Se você não se opuser à fusão, enviarei um PR se ninguém me vencer.
twosigmajab
em 23 mai. 2019
@twosigmajab boa ideia! Por favor, vá em frente :)
benoitc
em 23 mai. 2019
Questões relacionadas
leonardbinet
·
4Comentários
bywangxp
·
4Comentários
davidfstr
·
3Comentários
joekohlsdorf
·
4Comentários
Bogdanp
·
3Comentários
Comentários muito úteis
@twosigmajab boa ideia! Por favor, vá em frente :)