Evalml: Agregar un objetivo de precisión de clasificación

Creado en 18 dic. 2019 · 4Comentarios · Fuente: alteryx/evalml

Definición (de wikipedia) :
Screen Shot 2019-12-18 at 11.44.38 AM.png

Esto surgió ayer en la discusión sobre el trabajo inicial de Dan Putler en una comparación de rendimiento multiplataforma (notas en el n. ° 293). Dan usó un objetivo de precisión de clasificación en Applied Modeling, H20 y R, pero usó recordar en evalml. Si implementamos precisión, eso puede proporcionar una mejor comparación de rendimiento. Además, cuantas más métricas admitamos, mejor.

Sería genial mantener nuestra implementación lo suficientemente general como para manejar multiclase, pero si tenemos que comenzar con la clasificación binaria, que así sea.

enhancement good first issue

Fuente

dsherry

Todos 4 comentarios

relacionado con esto, también deberíamos implementar una precisión equilibrada

kmax12 en 19 feb. 2020

👍1

¡Entendido, actualizaré el plan del proyecto de objetivos con esto!

angela97lin en 19 feb. 2020

@ angela97lin mi sugerencia es enumerar este problema en la sección de trabajo futuro si lo desea, pero no permitir que afecte el alcance del proyecto de API objetivo actual. Creo que nuestra prioridad debe seguir siendo terminar el proyecto; entonces este sería un gran primer tema en el que trabajar una vez que lo hayamos hecho. ¿Eso suena bien?

dsherry en 19 feb. 2020

👍1

Bien, después de hablar con Max y Angela, el plan es:
1) Esto todavía está separado del proyecto de API objetivo
2) Podemos implementar esto en cualquier momento, antes / durante / después de ese proyecto, por lo que está en el backlog de desarrollo. No es una gran cantidad de trabajo
3) Su baja prioridad por ahora
4) Este sería un buen problema para un nuevo empleado.

dsherry en 19 feb. 2020

👍1

¿Fue útil esta página

0 / 5 - 0 calificaciones