Trident: कुबेरनेट्स संस्करण अपडेट होने के बाद ट्राइडेंट सीएसआई नोड प्लगइन अपंजीकृत है

बग का वर्णन करें

एक नोड पर ट्राइडेंट सीएसआई नोड प्लगइन ( csi.trident.netapp.io ) अब कुबेरनेट्स संस्करण को v1.18.9 से v1.19.4 में अपडेट किए जाने के बाद अपंजीकृत है। इस नोड पर पॉड्स अब ट्राइडेंट वॉल्यूम को माउंट और अनमाउंट नहीं कर सकते हैं।

त्रुटि संदेश

हम क्यूबलेट लॉग में निम्नलिखित संदेश देखते हैं।

पंजीकरण सॉकेट ( /var/lib/kubelet/plugins_registry/csi.trident.netapp.io-reg.sock ) को हटा दिए जाने के बाद से csi.trident.netapp.io अपंजीकृत था।

I1119 05:47:54.246972 6550 plugin_watcher.go:212] वांछित राज्य कैश से सॉकेट पथ /var/lib/kubelet/plugins_registry/csi.trident.netapp.io-reg.sock को हटाना
I1119 05:47:53.162305 6550 reconciler.go:139] OperationExecutor.UnregisterPlugin प्लगइन के लिए "/var/lib/kubelet/plugins_registry/csi.trident.netapp.io-reg.sock" पर शुरू हुआ (प्लगइन विवरण: &{/var /lib/kubelet/plugins_registry/csi.trident.netapp.io-reg.sock 2020-11-04 05:08:19.553684094 +0000 UTC m=+38.893901704 0x704c200 csi.trident.netapp.io})
I1119 05:47:53.163390 6550 csi_plugin.go:177] kubernetes.io/csi: registrationHandler.DeRegisterPlugin प्लगइन के लिए अनुरोध csi.trident.netapp.io

पॉड वॉल्यूम को अनमाउंट नहीं कर सका क्योंकि csi.trident.netapp.io नहीं मिला।

E1119 09:02:52.819122 6550 Nestedpendingoperations.go:301] "{v olumeName:kubernetes.io/csi/csi.trident.netapp.io ^pvc-75a6fd7f-7aee-45e8-a5fa-d4500272528e podName:ad9018a7d1-401 के लिए ऑपरेशन

दो त्रिशूल-सीएसआई एक साथ चल रहे थे

हमने पाया कि इस नोड पर दो trident-csi (नोड प्लगिन) पॉड बहुत कम समय के लिए एक साथ चल रहे थे, और पुराने driver-registrar एक नया शुरू होने के बाद बंद हो गए थे।

driver-registrar SIGTERM ( node_register.go#L113-L116 ) प्राप्त करने पर पंजीकरण सॉकेट ( /var/lib/kubelet/plugins_registry/csi.trident.netapp.io-reg.sock ) को हटा देता है। सॉकेट को हटाने से क्यूबलेट ट्राइडेंट प्लगइन को अपंजीकृत कर देता है। मेरा मानना ​​है कि यही समस्या का कारण है।

डेमॉनसेट को अपडेट करने के बाद फिर से बनाया गया

ट्राइडेंट-सीएसआई (नोड प्लगिन) पॉड्स का प्रबंधन डेमनसेट द्वारा किया जाता है। आम तौर पर, प्रत्येक नोड पर केवल एक पॉड चलता है। लेकिन कुबेरनेट्स के अपडेट होने के बाद, ट्राइडेंट-सीएसआई डेमोनसेट को trident-operator द्वारा फिर से बनाया गया। डेमनसेट को हटाने से दो पॉड (पुराने और नए) एक साथ चल सकते हैं।

हमने trident-operator लॉग पर इसकी पुष्टि की है।

यहां, trident-csi डेमोंसेट को हटा दिया गया था।

समय = "2020-11-19 टी05:47:45जेड" स्तर = डिबग संदेश = "हटाया गया कुबेरनेट्स डेमनसेट।" डेमनसेट = त्रिशूल-सीएसआई नाम स्थान = त्रिशूल

इसके तुरंत बाद trident-csi डेमोंसेट बनाया गया।

समय = "2020-11-19 टी05:47:45जेड" स्तर = डीबग संदेश = "वस्तु बनाना।" दयालु = डेमनसेट नाम = त्रिशूल-सीएसआई नामस्थान = त्रिशूल

Kubernetes के अपडेट होने के बाद, shouldUpdate फ्लैग को true पर सेट किया गया था ( controler.go#L1110 )। ऐसा लगता है कि shouldUpdate ध्वज trident-csi डेमोंसेट को हटाने का कारण बनता है ( installer.go#L1489-L1494 )।

पर्यावरण

• त्रिशूल संस्करण: 20.10.0 त्रिशूल-संचालक के साथ
• ट्राइडेंट इंस्टॉलेशन फ़्लैग का इस्तेमाल किया गया: silenceAutosupport: true (ट्राइडेंट ऑपरेटर)
• कंटेनर रनटाइम: डॉकर 19.03.13
• कुबेरनेट्स संस्करण: v1.19.4
• कुबेरनेट्स ऑर्केस्ट्रेटर: कुबेरनेट्स
• कुबेरनेट्स ने फीचर गेट्स को सक्षम किया:
• ओएस: उबंटू 18.04
• नेटएप बैकएंड प्रकार: ओएनटीएपी एएफएफ 9.1पी14
• अन्य:

प्रजनन करना

Kubernetes संस्करण को अद्यतन करने से यह समस्या पुन: उत्पन्न हो सकती है। चूंकि कुबेरनेट्स को अपडेट करने में लंबा समय लगता है और हमेशा नहीं होता है, इसलिए हमने निम्नलिखित व्यवहारों की पुष्टि की जो विभिन्न प्रदर्शनों के माध्यम से इस समस्या का कारण बनते हैं।

दो ट्राइडेंट-सीएसआई क्यूबलेट को ट्राइडेंट प्लगइन को अपंजीकृत करने का कारण बनता है

1. पुष्टि करें कि ट्राइडेंट सीएसआई ड्राइवर नोड पर पंजीकृत है।

$ kubectl describe csinodes.storage.k8s.io <NODE_NAME>
...
Spec:
  Drivers:
    csi.trident.netapp.io:
      Node ID:        <NODE_NAME>
      Topology Keys:  [topology.kubernetes.io/zone]

1. प्रत्येक नोड पर दो त्रिशूल-सीएसआई पॉड चलाने के लिए trident-csi डेमनसेट की प्रतिलिपि बनाएँ।

$ kubectl get ds -n trident trident-csi -o json | jq '.metadata.name|="trident-csi-2"' | kubectl apply -f -

1. उनके चलने की प्रतीक्षा करें, फिर कॉपी किए गए trident-csi-2 डेमनसेट को हटा दें।

$ kubectl delete ds -n trident trident-csi-2

1. पुष्टि करें कि ट्राइडेंट CSI ड्राइवर नोड पर ड्राइवर्स सेक्शन में गायब हो गया है। (इसमे कुछ समय लगेगा)

$ kubectl describe csinodes.storage.k8s.io <NODE_NAME>
Spec:

डेमनसेट को फिर से बनाने से दो पॉड (पुराने और नए) एक साथ चल सकते हैं

1. trident-csi डेमनसेट हटाएं। ट्राइडेंट-ऑपरेटर द्वारा जल्द ही डेमनसेट को फिर से बनाया जाएगा।

$ kubectl delete ds -n trident trident-csi

1. आप प्रत्येक नोड पर दो trident-csi पॉड देखेंगे।

$ kubectl get pods -n trident -o wide

अपेक्षित् व्यवहार
कुबेरनेट्स संस्करण के अद्यतन होने के बाद पॉड्स ट्राइडेंट वॉल्यूम को माउंट और अनमाउंट कर सकते हैं।

अतिरिक्त संदर्भ
कोई नहीं