Evalml: स्वत: खोज "raise_errors" ध्वज को डिफ़ॉल्ट रूप से सही पर अपडेट करें

को निर्मित 10 दिस॰ 2019 · 4टिप्पणियाँ · स्रोत: alteryx/evalml

#252 में, @angela97lin ने एक बग को ठीक किया जो अनदेखा हो गया क्योंकि ऑटोएमएल fit हमारे यूनिट परीक्षण कवरेज को त्रुटियों को नहीं बढ़ाने के लिए कॉन्फ़िगर किया गया था (विशेष रूप से, पैरामीटर raise_errors वर्तमान में डिफ़ॉल्ट रूप से गलत है)। उसे अद्यतन पीआर इकाई परीक्षण स्थापित करने के लिए raise_errors प्रत्येक कॉल में सच करने के लिए automl को fit परीक्षणों में।

मैं इस पर कुछ और चर्चा करने के लिए एक टिकट बनाना चाहता था। मैं raise_errors पैरामीटर के बारे में उलझन में हूं। यह क्यों मौजूद है? यह केवल automl fit ही क्यों लागू होता है? यदि यह एक आवश्यक पैरामीटर है, तो क्या कोई बेहतर डिज़ाइन है, और विशेष रूप से जो इस तरह की बग को हतोत्साहित करेगा? मुझे चिंता है कि अगर हम यूनिट परीक्षणों में raise_errors को सही पर सेट करने के लिए याद रखने के लिए टीम पर भरोसा करते हैं, तो हम फिर से इसी तरह के मुद्दों में भाग सकते हैं।

विचार: मुझे पता है कि @ kmax12 ने इसके लिए एक पर्यावरण चर का उपयोग करके उल्लेख किया है। यदि यह पैरामीटर आवश्यक है लेकिन मेरी इकाई परीक्षण चिंताएं मान्य हैं, तो यह एक अच्छा समाधान हो सकता है। हम एक परीक्षण स्थिरता का उपयोग करने के लिए सभी परीक्षणों को भी अपडेट कर सकते हैं जो किसी भी तरह सुनिश्चित करता है कि raise_errors उचित रूप से सेट किया गया है, या तो env var, अन्य वैश्विक कॉन्फ़िगरेशन के माध्यम से, या automl fit विधि को लपेटकर।

enhancement

स्रोत

dsherry

👍1

सबसे उपयोगी टिप्पणी

यह हाल ही में प्रयोज्य ब्लिट्ज में आया था। हम जिस निर्णय पर पहुंचे, वह raise_errors रखना था लेकिन इसे सही पर डिफ़ॉल्ट करना था।

dsherry 14 अप्रैल 2020

👍2

सभी 4 टिप्पणियाँ

मुझे लगता है कि आपने यहां बहुत सारे मान्य बिंदु उठाए हैं! raise_error ध्वज के साथ मेरी आंत धारणा/अनुमान यह है कि यदि केवल एक पाइपलाइन विफल हो जाती है, तो उपयोगकर्ता नहीं चाहता कि उनका ऑटो (*) का पूरा रन विफल हो जाए। तो इसके बजाय, हम (चुपचाप) त्रुटि नहीं उठाते हैं और इसके बजाय उस पाइपलाइन के लिए सभी स्कोर NaN पर सेट करते हैं।

मैं सहमत हूं, हालांकि, फिसलना बहुत आसान होगा, इस ध्वज को नए परीक्षणों में सेट करना भूल जाएं, और इस तरह की बग को फिर से याद करें, और यह आगे की चर्चा की गारंटी देता है!

angela97lin 10 दिस॰ 2019

👍1

dsherry 14 अप्रैल 2020

👍2

@angela97lin इसके लिए एक जनसंपर्क पर काम कर रही है: #638

dsherry 14 अप्रैल 2020

@ Angela97lin क्या आप कृपया इसे प्रगति पर ले जा सकते हैं क्योंकि आपके पास इसके लिए एक पीआर खुला है?

dsherry 15 अप्रैल 2020

क्या यह पृष्ठ उपयोगी था?

0 / 5 - 0 रेटिंग्स

Evalml: स्वत: खोज "raise_errors" ध्वज को डिफ़ॉल्ट रूप से सही पर अपडेट करें

सबसे उपयोगी टिप्पणी

सभी 4 टिप्पणियाँ

संबंधित मुद्दों