Nunit: परीक्षा परिणाम में फ़ाइलें संलग्न करना

आपके द्वारा उल्लिखित विधि Microsoft के परीक्षण ढांचे में TestContext वर्ग का हिस्सा है। NUnit में भी इसी नाम का एक वर्ग है, लेकिन इसका MsTest वर्ग से कोई संबंध नहीं है और ऐसी कोई विधि नहीं है। NUnit में आउटपुट में फ़ाइलें संलग्न करने की कोई सुविधा नहीं है।

धन्यवाद चार्ली।
लेकिन क्या AddResultFile विधि भविष्य में NUnit में जुड़ जाएगी?
यह तरीका वाकई मददगार है।

फिलहाल इसके लिए कोई योजना नहीं है। अगर आप इस समस्या को ऐसी सुविधा के अनुरोध में बदलना चाहते हैं, तो हम ऐसा कर सकते हैं और इसे फिर से खोल सकते हैं।

यदि हां, तो आपको अधिक विस्तार से बताना चाहिए कि यह कैसे काम करेगा। फ़ाइलें कैसे बनाई जाती हैं, वे कहाँ संग्रहीत की जाती हैं, आदि। क्या आप पूछ रहे हैं कि NUnit वास्तव में फ़ाइलें बनाता है या बस उनका संदर्भ बनाए रखता है?

बेशक, हमें इस विचार को स्वीकार करना होगा, इसे प्राथमिकता देनी होगी और इसे कुछ रिलीज के लिए शेड्यूल करना होगा।

आपकी प्रतिक्रिया चार्ली के लिए धन्यवाद।
यह बहुत अच्छा होगा यदि उस विधि को NUnit में जोड़ा जाए।
यह Microsoft के परीक्षण ढांचे में TestContext वर्ग की AddResultFile विधि की तरह ही काम करेगा।
कुछ वीएस में टेस्ट एक्सप्लोरर में टेस्ट आउटपुट के लिए टेस्ट रिजल्ट (फाइल एचटीएमएल टेस्ट रिजल्ट या स्क्रीनशॉट) को लिंक करना पसंद करता है। आप स्क्रीनशॉट को नीचे की तरह देख सकते हैं।

विचार के लिए धन्यवाद। मैं इसे फिर से खोलूंगा।

हालांकि, इसे और आगे ले जाने के लिए, हमें यह पता लगाना होगा कि यह केवल एडॉप्टर ही नहीं, NUnit के लिए कैसे काम करता है। मैं इसे एक विचार के रूप में चिह्नित कर रहा हूं, जिसे हम कुछ ऐसा कहते हैं जो भविष्य की विशेषता के रूप में विचार करने के लिए पर्याप्त रूप से परिभाषित नहीं है। हो सकता है कि अन्य लोग सुझावों के साथ झंकार करें।

जिन बातों पर हमें विचार करने की आवश्यकता है:

• यह XML परिणाम में कैसा दिखेगा
• क्या हम इस सब को इस तरह से पैकेज कर सकते हैं कि परिणाम और अनुलग्नक एक साथ रखे जाएं?
• NUnit कंसोल इसके साथ क्या करेगा, अगर कुछ भी।
• क्या NUnit gui इसे किसी तरह प्रदर्शित करेगा

यह फीचर होना जरूरी है।
हम NUnit और सेलेनियम के साथ अपने स्वचालित व्यवहार परीक्षण चला रहे हैं। यदि कोई परीक्षण विफल हो जाता है, तो हम परीक्षा परिणाम में ब्राउज़र का एक स्क्रीनशॉट संलग्न करना पसंद करते हैं: यह परीक्षण को ठीक करने में एक बड़ी मदद है।
ऐसा करने के लिए, हमें Microsoft के परीक्षण ढांचे का उपयोग करना पड़ा, लेकिन यह NUnit (असेंबली या वर्ग स्तर पर विशेषता, सामान्य परीक्षण वर्ग ...) की तुलना में उतना शक्तिशाली नहीं है। इसलिए हम NUnit में इस सुविधा की प्रतीक्षा कर रहे हैं।

मैं इसे एक ऐसे फीचर में बदल रहा हूं, जिसे डिजाइन की जरूरत है, जो एक विचार से ज्यादा ठोस है। हमें अभी भी मेरी पिछली टिप्पणी में सूचीबद्ध प्रश्नों को हल करने की आवश्यकता है।

मुझे लगता है कि यह या तो xml में फ़ाइल को क्रमबद्ध कर रहा है, या इसके अलावा एक संदर्भित निर्देशिका रख रहा है। एक विशाल एक्सएमएल, सामान्य धीमापन, और एक विशिष्ट दुभाषिया की आवश्यकता वाली फाइलों की ओर जाता है, दूसरा परिणामों से फाइलों को अलग करने की संभावना की ओर जाता है, और संदर्भ टूट जाते हैं।

बुराइयों में कौन कम है? मुझे लगता है कि पूर्व के साथ, दर्द सब कुछ पैकेज में रखने के लाभों से अधिक होगा - और 'उम्मीद के मुताबिक उपलब्ध' रिश्तेदार लिंक पर्याप्त होंगे।

• NUnit कंसोल इसके साथ क्या करेगा, अगर कुछ भी।
• क्या NUnit gui इसे किसी तरह प्रदर्शित करेगा

GUI के लिए, उपरोक्त इंटरफ़ेस जैसा कुछ काफी अच्छा लगता है, बस संलग्न फ़ाइल के लिए हाइपरलिंक। कंसोल, आईएमओ, को विफल-परीक्षण संदेश में उपयोगकर्ता को सूचित करना चाहिए कि एक फ़ाइल उपलब्ध है, और यह स्थान है।

मुझे लगता है कि डिजाइन तैयार होने के बाद किसी को पीआर जमा करने की आवश्यकता होगी - @fredgate , आपकी रुचि है? मैं

हमें देखना चाहिए कि एमएसटीएस्ट फाइलों को कैसे स्टोर करता है। मुझे उम्मीद है कि विजुअल स्टूडियो एक्सटेंशन को ड्राइव पर फ़ाइल के लिए एक लिंक की आवश्यकता है।

ऐसा लगता है कि एक्सएमएल में एक संदर्भ जाने का रास्ता है। एनयूनीट के लिए, तार्किक प्रारंभिक स्थान कार्य निर्देशिका है, जहां एक्सएमएल डिफ़ॉल्ट रूप से जाता है। यह ऊपर मेरे पहले दो बिंदुओं को हल करता है।

मेरे अन्य बिंदुओं का उत्तर देना:

• मुझे लगता है कि कंसोल पथ के साथ अनुलग्नकों को सूचीबद्ध करने के अलावा और कुछ नहीं करेगा, जैसा कि यह परिणामों के लिए करता है।
• संलग्नक को सूचीबद्ध करने के लिए गुई में किसी प्रकार का मेनू या पैनल हो सकता है। यह उन्हें प्रदर्शित कर सकता है बशर्ते विशेष फ़ाइल प्रकार के लिए एक डिफ़ॉल्ट एप्लिकेशन परिभाषित किया गया हो।

एक अच्छी सुविधा की तरह लगता है, जिसे मैं सामान्य प्राथमिकता देने की ओर झुकूंगा।

@rprouse क्या आपको याद है कि

अनुलग्नक तत्व को विशेषताओं और तत्वों के संदर्भ में क्या शामिल करने की आवश्यकता है? कुछ इस तरह?

<attachments>
    <attachment  description="Final screen shot">ScreenShot.jpg</attachment>
    ...
</attachments>

मुझे लगता है कि यह उस परीक्षण का बच्चा है जिसने इसे बनाया है, इसलिए हमारे पास वह जानकारी है। उपयोगकर्ता कई स्क्रीन शॉट्स शामिल करना चाह सकते हैं, इसलिए विवरण। और कुछ?

कुछ जोड़ने के लिए वाक्य रचना क्या है? क्या हमें टेस्टकॉन्टेक्स्ट का उपयोग करना चाहिए? क्या इसे एक जोर से जोड़ने का कोई तरीका होना चाहिए ताकि अनुलग्नक स्वचालित रूप से विफलता पर बनाया जा सके?

क्या कोई इसके लिए एक युक्ति लिखना चाहता है?

एक अच्छी सुविधा की तरह लगता है, जिसे मैं सामान्य प्राथमिकता देने की ओर झुकूंगा।

मैं

@rprouse क्या आपको याद है कि

नहीं, मैंने कभी अटैचमेंट का उपयोग नहीं किया है। मुझे आपका एक्सएमएल प्रारूप पसंद है। व्यक्तिगत रूप से, मुझे लगता है कि हमें टेस्टकॉन्टेक्स्ट से अटैचमेंट जोड़ने के साथ शुरू करना चाहिए क्योंकि यह आसान मार्ग है। फिर हम मूल्यांकन कर सकते हैं कि क्या हम इसे Asserts तक विस्तारित करना चाहते हैं।

तो TestContext.CurrentContext.AddAttachment ?

(string path) और (string path, string description) लिए ओवरलोड के साथ?

शायद हमारे पास पहले से ही एक युक्ति है!

कृपया इस सुविधा की प्राथमिकता बढ़ाएँ। हमारे परीक्षण परिणाम सारांश के लिए UI स्क्रीनशॉट संलग्न करना बहुत उपयोगी होगा। क्या ये अटैचमेंट VSTS (विजुअल स्टूडियो टीम सर्विसेज) के अंदर बिल्ड रिजल्ट में उपलब्ध होंगे?
बहुत बहुत धन्यवाद चार्ली

मुझे लगता है कि यह एक अच्छी सुविधा है और मैं टीमसिटी में निर्माण कलाकृतियों के रूप में संलग्नक प्रकाशित करूंगा

मैंने इसे सामान्य प्राथमिकता पर उठाया क्योंकि @rprouse ने पहले ही यह सुझाव दिया था। ध्यान दें कि निम्न और सामान्य प्राथमिकता वाली वस्तुओं को कभी-कभी किसी को उन्हें लागू करने के लिए प्रेरित होने की प्रतीक्षा करनी पड़ती है - या तो एक एनयूनीट कमिटर या योगदानकर्ता। यह टीम के निर्णय से अधिक व्यक्तिगत निर्णय है कि यह कब किया जाता है।

मुझे उम्मीद है कि इस बारे में कोई नहीं भूला होगा। यह एक बहुत ही मददगार फीचर होगा।

मुझे लगता है कि पिछली टिप्पणियों ने सभी डिज़ाइन मुद्दों को हल कर दिया है, इसलिए मैं डिज़ाइन लेबल को हटा रहा हूं और कार्यान्वयन के मुद्दे को बैकलॉग में जोड़ रहा हूं।

यह इतना नहीं है कि हम इसे भूल गए हैं क्योंकि हमारे पास बड़ी संख्या में चीजें चल रही हैं। जैसा कि मैंने पहले की एक टिप्पणी में उल्लेख किया है, इस तरह की सामान्य प्राथमिकता वाली वस्तुएं हमारी रिलीज योजना के हिस्से के रूप में निर्धारित नहीं हैं। यह टीम के किसी सदस्य या बाहरी योगदानकर्ता पर निर्भर करता है कि वे इसमें पर्याप्त रुचि लें कि वे इसे लें। उम्मीद है, इसे बैकलॉग में जोड़ने से किसी को कदम बढ़ाने के लिए प्रेरणा मिलेगी। आपके कौशल के आधार पर, वह आप हो सकते हैं! मैं

महान विशेषता! बहुत सराहना की जाएगी। उम्मीद है कि कोई इसे जल्द ही लागू करेगा

मैंने इसे लागू करने के लिए #2152 में आवश्यक ढांचे की कार्यक्षमता के लिए अभी एक पीआर किया है। यह देखते हुए कि इस मुद्दे को ट्रैक करने वाले कुछ लोग हैं, मैं इस मुद्दे को एक महाकाव्य और ट्रैक रनर समर्थन में बदलने की योजना बना रहा हूं, एक बार हम तय कर लें कि वहां क्या करना है।

यहाँ मेरे विचार हैं:

वी.एस. एडाप्टर
यह एमएसटीएस्ट की एक विशेषता है, इसलिए वीएस एडाप्टर फ्रेमवर्क में संलग्न फाइलों को दिखाने के लिए पहले से ही कार्यक्षमता है। बस इसे ट्रैक करने की आवश्यकता है कि इसे कैसे प्लग इन किया जाए।

कंसोल/एनयूनीटलाइट
मैं यहाँ मिश्रित दिमाग में हूँ। त्रुटिपूर्ण/चेतावनी परीक्षणों के साथ, परिणाम के साथ अनुलग्नक का फ़ाइलपथ/विवरण दिखाना समझ में आता है। उत्तीर्ण परीक्षाओं के अनुलग्नकों के बारे में क्या? क्या इन्हें दिखाने के लिए हमारे पास 'सूचना' आउटपुट होना चाहिए? तो कंसोल रनर के पास तीन प्रकार के आउटपुट होंगे - सूचना/चेतावनियां/त्रुटियां?

जीयूआई/ज़ामरीन
इन दोनों को अंततः इसका समर्थन करना चाहिए, लेकिन मुझे नहीं लगता कि यह एक उच्च प्राथमिकता है। मैं मुद्दे बनाऊंगा, लेकिन उन्हें इस महाकाव्य से नहीं जोड़ूंगा - वे तब किए जा सकते हैं जब मांग/समय की अनुमति हो।

टीमसिटी
@ निकोलेपियानिकोव - आपने कहा था कि आप इसमें रूचि रखते थे। हो सकता है कि आप #2152 पर नज़र रखने लायक हों। मैं

उपरोक्त सभी पर विचार? @ नूनिट/फ्रेमवर्क-टीम? अगले चरण तय करने के बाद मैं अलग-अलग मुद्दे उठाऊंगा।

@ChrisMaddock मुद्दे डिजाइन मुद्दे भी हो सकते हैं ताकि आप ऐसा कर सकें जो कहता है "गुई में अनुलग्नकों का समर्थन कैसे करें" - किसी भी अन्य के लिए जहां आप अनिश्चित हैं।

कंसोल रनर के लिए, हम वर्तमान में सभी परीक्षण नहीं दिखाते हैं, हालांकि यह किया जा सकता है। किसी भी विवरण रिपोर्ट को एक्सटेंशन या कस्टम एक्सएसएल ट्रांसफॉर्म द्वारा नियंत्रित किया जा सकता है। उत्तरार्द्ध किसी भी व्यक्ति के लिए लागू करने के लिए छोटा होगा जो एक्सएसएल कोडिंग करने के इच्छुक है। यह एक योगदान परिवर्तन हो सकता है।

NUnitLite मुश्किल है, क्योंकि हम इसे बहुत हल्का रखना चाहते हैं। हालांकि, कोई यह मानता है कि उपयोगकर्ता अपने अनुलग्नकों को एक बुद्धिमान तरीके से नाम देंगे और उन सभी को एक ही निर्देशिका में रखेंगे, इसलिए उन्हें ढूंढना काफी आसान होना चाहिए। वास्तव में, यह कंसोल रनर के लिए भी काम करता है
मुझे लगता है कि गुई के लिए स्वाभाविक बात यह है कि परीक्षा परिणाम के बारे में अन्य सभी चीजों के साथ संलग्नक का नाम और विवरण दिखाया जाए। हम इसे एक लिंक बना सकते हैं यदि उपयोगकर्ता के पास एक उपयुक्त एप्लिकेशन इंस्टॉल है जो फ़ाइल को खोलेगा।

एक बार हमारे पास अटैचमेंट हो जाने के बाद, मुझे लगता है कि एडॉप्टर से विजुअल स्टूडियो को पास किए गए परिणामों में उन्हें जोड़ना बहुत आसान है।

मैंने अगले चरणों को कवर करने के लिए https://github.com/nunit/docs/issues/197 और https://github.com/nunit/nunit3-vs-adapter/issues/332 बनाए हैं।

धावक समर्थन के संबंध में - यदि इसके लिए केवल वर्तमान कॉल वीएस एडाप्टर के साथ एकीकरण हैं, तो मैं अभी इसे वहां लागू करने के इच्छुक हूं। यह एक ऐसी विशेषता है जो ग्राफिकल रनर के साथ बेहतर ढंग से फिट होती है, फिर भविष्य में क्ली - और अन्य रनर सपोर्ट को हमेशा जोड़ा जा सकता है, लोगों को इसकी आवश्यकता होनी चाहिए।

@ChrisMaddock मुझे कंसोल रनर से अटैचमेंट सपोर्ट देखना अच्छा लगेगा।

@kdubau - सही समय! उस मामले में, आप इसे कैसा दिखाना चाहेंगे? आपका उपयोग मामला क्या होगा?

मैं विफलताओं/चेतावनियों, सूची विवरण और फ़ाइल पथ का परीक्षण करने के लिए टेक्स्ट के 'अटैचमेंट' ब्लॉक को जोड़ने की कल्पना कर सकता हूं। एक कारण यह है कि मैं ऐसा नहीं करने पर बहस कर रहा था, यह है कि मुझे विश्वास नहीं था कि कई उपयोगकर्ता संबंधित फ़ाइल को खोजने के लिए अपने खोल से फ़ाइलपथ को कॉपी/पेस्ट करना चाहेंगे। क्या आप असहमत होंगे?

सोचने का दूसरा मुद्दा यह है कि कंसोल वर्तमान में केवल विफल/चेतावनी परीक्षण प्रदर्शित करता है, न कि सभी परीक्षण। क्या हमें परिणामों की तीसरी सूची ('सूचना'?) बनानी चाहिए जो सभी उत्तीर्ण-परीक्षा-संलग्नक दिखाती है?

शायद यह वास्तव में ठीक होगा कंसोल रनर केवल असफल परीक्षणों के लिए अटैचमेंट दिखा रहा है, क्योंकि संभवतः कंसोल रन में यह सब दिलचस्प है। मैं यहाँ विफलताओं के लिए प्रासंगिक लॉग फ़ाइलों की कल्पना कर रहा हूँ, और ऐसे।

@kdubau यहां इसका वर्णन करने के बजाय, मेरा सुझाव है कि आप नूनिट-कंसोल रेपो में एक नया मुद्दा बनाएं।

@ChrisMaddock @CharliePoole मैंने यहां संदर्भ को गलत समझा होगा। मुझे केवल आउटपुट एक्सएमएल में संदर्भित संलग्नक रखने में दिलचस्पी है - कंसोल आउटपुट में अटैचमेंट जानकारी को वास्तव में प्रदर्शित करने की कोई आवश्यकता नहीं है। मेरा उपयोग मामला यह है कि मेरा सीआई सिस्टम (विजुअल स्टूडियो टीम सर्विसेज) एक्सएमएल में सूचीबद्ध अनुलग्नकों को बिल्ड कलाकृतियों के रूप में अपलोड करने में सक्षम हो (इसलिए इसे स्थानीय डिस्क पर फ़ाइल के संदर्भ की आवश्यकता होगी)।

मैं चिंतित था कि कंसोल रनर के माध्यम से चल रहे परीक्षणों में एक्सएमएल में अटैचमेंट नहीं होंगे, लेकिन आगे पढ़ने पर मुझे नहीं लगता कि यह सवाल था। मुझे सही जवाब दो अगर मैं गलत हूँ :)

@kdubau - तुम सही हो। #2152 को अभी मर्ज किया गया है, जो परिणाम xml में अनुलग्नकों का समर्थन करता है। यदि सब कुछ योजना के अनुसार होता है, तो यह अगले सप्ताह जारी NUnit 3.7 का हिस्सा होगा।

ठीक है... अगर हमें कंसोल में "समर्थन" की आवश्यकता है, तो इसका मतलब होगा कि फ्रेमवर्क से आने वाले एक्सएमएल को बचाने के अलावा कुछ और करना। Nunit3 एडाप्टर के मामले में, मुझे लगता है कि @ChrisMaddock को परिभाषित किया जाता है कि क्या मतलब होगा।

हेलो दोस्तों, ये काम हो गया है या ज्यादा पेंडिंग है? मुझे इससे संबंधित कोई खुला मुद्दा या पीआर नहीं मिला।

क्षमा करें अगर मुझे कुछ याद आ रहा है लेकिन मेरे परीक्षण अनुलग्नक अभी भी वीएस टेस्ट एक्सप्लोरर में दिखाई नहीं दे रहे हैं जैसा कि मैं उम्मीद करता हूं। मैं NuGet से NUnit3TestAdapter 3.8.0 और API TestContext.AddTestAttachement(file) कर रहा हूं लेकिन मुझे टेस्ट एक्सप्लोरर में अटैचमेंट नहीं दिख रहे हैं। मैं कुछ इस तरह की उम्मीद कर रहा हूँ:

क्या मेरी उम्मीदें गलत हैं?

@kdubau - नहीं, इसे NUnit v3.7 और NUnit3TestAdapter 3.8 में रिलीज़ किया जाना चाहिए। कार्यान्वयन के लिए https://github.com/nunit/nunit3-vs-adapter/issues/332 देखें। यह मुद्दा अभी खुला है क्योंकि मैं अभी भी आवश्यक दस्तावेज के दो वाक्यों को जोड़ने के लिए चक्कर नहीं लगा पाया हूं...

यदि यह काम नहीं कर रहा है, तो मैं पहले आपके परीक्षण NUnit कंसोल में चलाऊंगा - और देखें कि क्या आपका अनुलग्नक परिणाम xml फ़ाइल में सही तरीके से रिकॉर्ड किया गया है। यदि नहीं, तो इस रेपो में एक समस्या खोलें, यदि यह है, तो एडेप्टर रेपो में एक समस्या खोलें, और हम आगे की जांच कर सकते हैं। मैं

@ChrisMaddock ठीक है, समस्या बनाई गई https://github.com/nunit/nunit3-vs-adapter/issues/373

@kdubau से प्रेरणा के लिए धन्यवाद, मैंने आखिरकार इस सुविधा का दस्तावेजीकरण किया है, और इस महाकाव्य को बंद कर सकता हूं। मैं