Evalml: Adicionar um objetivo de precisão de classificação

Criado em 18 dez. 2019  ·  4Comentários  ·  Fonte: alteryx/evalml

Definição (da wikipedia) :
Screen Shot 2019-12-18 at 11.44.38 AM.png

Isso surgiu na discussão sobre o trabalho inicial de Dan Putler em uma comparação de desempenho de plataforma cruzada ontem (notas no nº 293). Dan usou um objetivo de precisão de classificação em Modelagem Aplicada, H20 e R, mas usou recall em evalml. Se implementarmos a precisão, isso pode fornecer uma melhor comparação de desempenho. Além disso, quanto mais métricas oferecermos suporte, melhor.

Seria ótimo manter nossa implementação geral o suficiente para lidar com multiclasse, mas se tivermos que começar com a classificação binária, que assim seja.

enhancement good first issue

Todos 4 comentários

relacionado a isso, devemos também implementar precisão balanceada

Ok, irei atualizar os objetivos do plano do projeto com isso!

@ angela97lin, minha sugestão é listar esse problema na seção de trabalho futuro, se quiser, mas não permitir que afete o escopo do projeto de API objetivo atual. Acho que nossa prioridade ainda deve ser terminar o projeto; então essa seria uma ótima primeira questão para trabalhar depois de terminada. Isso soa bem?

Ok, depois de falar com Max e Ângela, o plano é:
1) Isso ainda está separado do projeto objetivo da API
2) Podemos implementar isso a qualquer momento, antes / durante / depois desse projeto, e é por isso que está no backlog de dev. Não é uma grande quantidade de trabalho
3) Sua baixa prioridade por enquanto
4) Isso seria um bom problema para uma nova contratação

Esta página foi útil?
0 / 5 - 0 avaliações