Trident: अमान्य स्नैपशॉट संदर्भों पर ट्राइडेंट-सीएसआई क्रैशलूप

को निर्मित 7 दिस॰ 2020 · 5टिप्पणियाँ · स्रोत: NetApp/trident

बग का वर्णन करें

ट्राइडेंट-सीएसआई परिनियोजन क्रैशलूपिंग की वजह से था

I1207 08:20:13.609384 1 connection.go:186] GRPC error: rpc error: code = FailedPrecondition desc = Trident initialization failed; error attempting to clean up snapshot snapshot-SOMEUUID from backend ontapnas.... : error reading volume size: flexvol trident_pvc_SOMEOTHERUUID not found

किसी कारण से ट्राइडेंट-सीएसआई पीवीसी बैकएंड पर स्नैपशॉट के बचे हुए संदर्भों का अनुसरण कर रहा था जो स्नैपशॉट का समर्थन नहीं करता था।
स्नैपशॉट स्वयं उस पीवीसी के लिए मौजूद नहीं था (हो सकता है कि इसे गलती से कुबेरनेट्स में अतीत में बनाया गया हो [>1 महीने पहले])। मैंने मूल पीवीसी को भी हटा दिया था। लेकिन असली समस्या यह थी कि उस स्नैपशॉट के लिए "वॉल्यूमस्नैपशॉट" ऑब्जेक्ट को हटाना, इसके अन्य सभी संदर्भों को हटाना प्रतीत नहीं होता था।

बैकएंड था "ontap-nas-economy" ( https://netapp-trident.readthedocs.io/en/latest/kubernetes/operations/tasks/backends/ontap/drivers.html , द क्यू-ट्री वन)।

ऐसा लग रहा था कि सीएसआई एक 'इकोनॉमी' बैकएंड पर प्रावधानित पीवी (क्यूट्री) के लिए एक स्नैपशॉट का पता लगाने की कोशिश कर रहा था, लेकिन यह वास्तव में नियमित ऑनटैप-एनएएस बैकएंड में पीवीसी वॉल्यूम की जांच कर रहा था। जो हमारे डिफ़ॉल्ट के रूप में भी सेट है। मुझे संदेह है कि यह समस्या इसलिए हुई क्योंकि डिफ़ॉल्ट भंडारण वर्ग अर्थव्यवस्था एक था, जब स्नैपशॉट बनाया गया था। यह बाद में बदल गया और डिफ़ॉल्ट को ontap-nas पर सेट कर दिया जो बैकएंड का समर्थन करता है, लेकिन संदर्भ शायद उस बिंदु पर टूट गए थे/ठीक से साफ नहीं किए गए थे (?)।

उन अन्य संदर्भों में शामिल हैं:

एक VolumeSnapshotContent जो समान स्नैपशॉट/पीवीसी को संदर्भित करता है।
एक ट्राइडेंटवॉल्यूम ऑब्जेक्ट संदर्भित करता है जो पीवीसी को हटा देता है
एक TridentTransaction जिसमें उस स्नैपशॉट का संदर्भ भी शामिल है।

पिछले संदर्भों को हटाने से समस्या ठीक हो जाती है।

प्रारम्भिक अवस्था:

कुछ समय पहले, बैकएंड के लिए एक वॉल्यूम स्नैपशॉट संसाधन बनाया गया था जो इसका समर्थन नहीं करता था। ऐसा लगता है कि उस वॉल्यूम स्नैपशॉट को हटाने से अन्य त्रिशूल crd ऑब्जेक्ट्स पर इसके संदर्भ नहीं हटे।

क्या बग ट्रिगर किया:

कुछ नोड्स को पुनरारंभ करना, उन नोड्स में से एक पर क्यूबलेट को पुनरारंभ करना जिसमें स्नैपशॉट/पीवीसी के लिए वॉल्यूम अटैचमेंट था।

पर्यावरण
ओपनशिफ्ट 4.6.*

त्रिशूल संस्करण: 20.07.1 (उन्नयन के बाद 20.10.0 में भी दुर्घटनाग्रस्त)
त्रिशूल स्थापना झंडे का इस्तेमाल किया: --debug
कंटेनर रनटाइम: cri-o://1.19.0-24
कुबेरनेट्स संस्करण: v1.19.0
कुबेरनेट्स ऑर्केस्ट्रेटर: ओपनशिफ्ट 4.6.*
कुबेरनेट्स ने फीचर गेट्स को सक्षम किया: [जैसे CSINodeInfo]
ओएस: रेड हैट एंटरप्राइज लिनक्स कोरओएस 46.82
नेटएप बैकएंड प्रकार: [जैसे एडब्ल्यूएस के लिए सीवीएस, ओएनटीएपी एएफएफ 9.5, एचसीआई 1.7]

प्रजनन करना

डिफ़ॉल्ट स्टोरेज बैकएंड को एक पर सेट करें जो स्नैपशॉट का समर्थन नहीं करता है।
बैकएंड के लिए वॉल्यूम स्नैपशॉट ऑब्जेक्ट बनाएं जो स्नैपशॉट का समर्थन नहीं करता
डिफ़ॉल्ट SC को स्नैपशॉट का समर्थन करने वाले में बदलें
वॉल्यूम स्नैपशॉट हटाएं
उस स्नैपशॉट के लिए अनुलग्नक वाले नोड को पुनरारंभ करें।
नोड को पुनरारंभ करने के बाद, त्रिशूल-सीएसआई पॉड को पुनरारंभ करें।
जांचें कि क्या सभी संदर्भ साफ़ हो गए हैं।

अपेक्षित् व्यवहार

टूटे हुए TridentTransaction संदर्भों पर कोई क्रैशलूपिंग नहीं।
एक चेतावनी प्रिंट करें और जारी रखें या टूटे हुए संदर्भ को साफ करें या इस व्यवहार को चालू/बंद करने के लिए एक ध्वज जोड़ें।

bug tracked

स्रोत

uberspot

👍3

सभी 5 टिप्पणियाँ

समाधान त्रिशूल लेनदेन को मैन्युअल रूप से हटाना और त्रिशूल फली को पुनरारंभ करना है। यह अभी भी एक बग है जिसे संबोधित करने की आवश्यकता है।
नीचे दिए गए समाधान के लिए कदम
ट्राइडेंट ट्रांजैक्शन सीआरडी में प्रविष्टियों की जांच करें।

#महासागर त्रिशूल प्राप्त करें -n त्रिशूल
# ओसी त्रिशूल लेनदेन प्राप्त करें -एन त्रिशूल -ओ जेसन

[ कोरोना@stablrebco2 ~]$ oct ttx -n त्रिशूल प्राप्त करें
नाम उम्र
पीवीसी-63836175-1515-4326-बी73एफ-सीएई3ई0963बी7-स्नैपशॉट-0462ई2ईए-एफ167-4846-86ए3-10सीसी6599बी4ए8 8डी

3) ट्राइडेंट ट्रांजैक्शन सीआरडी में मौजूद प्रविष्टियों को हटा दें।
त्रिशूल लेनदेन सीआरडी प्रविष्टि को हटाने से पहले, आपको सीआरडी संसाधन प्रविष्टि को संपादित करने और अंतिमकर्ता को हटाने की आवश्यकता हो सकती है (trident.netapp.io)

CRD संपादित करने के लिए, vi संपादक का उपयोग करें: (परिवर्तन को सहेजना याद रखें)

Kubectl (ओसी) ट्राइडेंट ट्रांजैक्शन पीवीसी-63836175-1515-4326-b73f-cae3e0963be7-स्नैपशॉट-0462e2ea-f167-4846-86a3-10cc6599b4a8 -n ट्राइडेंट संपादित करें

"trident.netapp.io" प्रविष्टि वाले फ़ाइनलाइज़र के अंतर्गत पंक्ति को हटा दें।

4) त्रिशूल लेनदेन सीआरडी को हटाने के लिए।

oc ttx PVC-63836175-1515-4326-b73f-cae3e0963be7-स्नैपशॉट-0462e2ea-f167-4846-86a3-10cc6599b4a8 -n त्रिशूल हटाएं

पुष्टि करें कि त्रिशूल लेनदेन हटा दिया गया है।

oc ttx -n त्रिशूल प्राप्त करें

5) इसके बाद ट्राइडेंट पॉड्स ऊपर आ जाएं और रनिंग स्टेटस में हों। यदि नहीं, तो मुख्य त्रिशूल पॉड (सबसे लंबे पॉड नाम वाला पॉड) को हटा दें।
यह एक नया त्रिशूल फली पैदा करना चाहिए जो फिर से प्रारंभ करने का प्रयास करेगा और इसे सफलतापूर्वक प्रारंभ करना चाहिए क्योंकि प्रारंभ के दौरान कोई पुराना लेनदेन नहीं किया जाना चाहिए।

महासागर फली-एन त्रिशूल प्राप्त करें

ओसी पॉड हटाएं-एन त्रिशूल

promothp 9 दिस॰ 2020

👍1

क्या बग को ठीक करने के लिए कोई पैच रिलीज़ होगा

promothp 9 दिस॰ 2020

हाय @promothp ,

अन्य सभी बगों के साथ इस बग का मूल्यांकन गंभीरता के आधार पर किया जाता है और प्राथमिकता के अनुसार इसे ठीक किया जाता है। यदि संभव हो तो जनवरी के अंत में इस मुद्दे के लिए एक बग फिक्स ट्राइडेंट v21.01 रिलीज में शामिल किया जाएगा।

gnarl 9 दिस॰ 2020

👍1

जल्द से जल्द पैच लगाने के लिए मेरा वोट जोड़ें!

ghost 12 जन॰ 2021

यह सुधार ट्राइडेंट v21.01 रिलीज में कमिट 0ce1aaf के साथ शामिल है।

gnarl 30 जन॰ 2021

क्या यह पृष्ठ उपयोगी था?

0 / 5 - 0 रेटिंग्स