Evalml: AutoMLSearch get_pipeline은 항상 같은 이름의 파이프라인을 반환합니다.

에 만든 2021년 03월 02일 · 3코멘트 · 출처: alteryx/evalml

재현:

from evalml.automl import AutoMLSearch
from evalml.demos import load_breast_cancer

X, y = load_breast_cancer()
automl = AutoMLSearch(X, y, problem_type="binary", max_batches=1)
automl.search()

pipelines = [automl.get_pipeline(i) for i in range(3)]
assert [p.name for p in pipelines] == ['LightGBM Classifier w/ Imputer', 'LightGBM Classifier w/ Imputer', 'LightGBM Classifier w/ Imputer']

파이프라인의 이름이 모두 같을 수는 없습니다. 추정자는 다릅니다.

[p.estimator.name for p in pipelines]

['Baseline Classifier', 'Decision Tree Classifier', 'LightGBM Classifier']

bug needs design

출처

freddyaboulton

👍1

가장 유용한 댓글

나는 이것이 #1400에서 유래한다고 믿는다. 나는 우리가 피클에 있다고 생각합니다(말장난 의도). 우리의 파이프라인 디자인은 파이프라인을 정의하기 위해 클래스 속성을 설정하는 것에 의존합니다. 이는 검색에서와 같이 동적으로 생성된 파이프라인 클래스를 갖는 데 도움이 됩니다. 문제는 이러한 파이프라인을 AutoMLSearch에서 "내보내기"할 수 없다는 것입니다.

내가 간과하고 있는 쉬운 솔루션이 있을 수 있지만 이 문제를 수정하고 automl 파이프라인을 피클 가능하게 유지하려면 깊은 설계 논의가 필요하다고 생각합니다.

freddyaboulton 에 2021년 03월 08일

👍3

모든 3 댓글

이름뿐만이 아닙니다. 하이퍼파라미터(클래스에 저장된 다른 값이 의심됨)도 업데이트됩니다. 이는 GeneratedPipelineBinary 클래스를 사용하고 해당 클래스 변수를 업데이트하기 때문입니다. 각 파이프라인은 GeneratedPipelineBinary 이므로 전체 클래스에 대해 업데이트하고 모든 인스턴스에 영향을 미칩니다.

angela97lin 에 2021년 03월 08일

👍2

freddyaboulton 에 2021년 03월 08일

👍3

계획
단기: 이 문제는 버그 동작을 해결하기 위해 #1400에서 변경 사항을 되돌리는 것을 추적합니다. 우리의 파이프 라인은 파이썬 지원하지 않습니다 pickle 하지만 여전히 사용하여 직렬화 가능합니다 기존 save / load 기능을 사용하는 cloudpickle .

장기적: 되돌리기 후 #1956은 python pickle 사용하여 evalml 파이프라인 저장을 지원해야 하는 방법을 추적합니다.

dsherry 에 2021년 03월 10일

이 페이지가 도움이 되었나요?

0 / 5 - 0 등급

Evalml: AutoMLSearch get_pipeline은 항상 같은 이름의 파이프라인을 반환합니다.

가장 유용한 댓글

모든 3 댓글

관련 문제