Libelektra: डॉकर: पुल दर सीमा तक पहुँच गया।

हमारे बिल्ड सर्वर को वास्तव में केवल हमारी निजी डॉकटर रजिस्ट्री से खींचना चाहिए, कभी भी docker.org से नहीं।

क्या समस्या शायद केवल एक सेटिंग है जिसे हमने hub.libelektra.org पर नहीं बदला है? या क्या ऐसी छवियां हैं जो hub.libelektra.org पर प्रतिबिंबित नहीं होती हैं?

@robaerd क्या आप कृपया एक नज़र

या क्या ऐसी छवियां हैं जो hub.libelektra.org पर प्रतिबिंबित नहीं होती हैं?

ऐसा लगता है कि यह हमेशा अद्यतन आधार छवियों की जांच करता है जो हमारे हब पर नहीं हैं ...

ऐसा लगता है कि यह हमेशा अद्यतन आधार छवियों की जांच करता है जो हमारे हब पर नहीं हैं ...

यह डॉकर छवियों के मासिक पुनर्निर्माण का हिस्सा है, क्योंकि महीना छवि आईडी का हिस्सा है।

डॉकर छवियों को वर्तमान में फिर से कैश किया गया है, इसलिए डॉकर छवियों का कोई पुनर्निर्माण नहीं होना चाहिए और इसलिए त्रुटि कम से कम इस महीने नहीं होनी चाहिए।

मुझे अभी भी यकीन नहीं है कि हम अपनी ~14 डॉकटर छवियों के साथ 100 पुल सीमा को कैसे पार कर सकते हैं।

इसमें देखने के लिए धन्यवाद। :स्पार्कलिंग_हार्ट: हाँ, यह थोड़ा अजीब लगता है: यदि यह केवल 14 डॉकटर चित्र हैं और हम केवल मासिक रूप से खींचते हैं तो हमें किसी भी सीमा से नीचे होना चाहिए?

ऐसा लगता है कि यह हमेशा अद्यतन आधार छवियों की जांच करता है जो हमारे हब पर नहीं हैं ...

क्या hub.libelektra.org इस तरह कॉन्फ़िगर किया गया है: https://docs.docker.com/registry/recipes/mirror ? यदि ऐसा है, तो मेरी समझ यह है कि जाँच करें कि क्या छवि अप-टू-डेट है, केवल कोटा की ओर गिना जाना चाहिए, अगर उसे वास्तव में एक नई छवि खींचने की आवश्यकता है।

कोटा के आसपास सबसे आसान तरीका सीआई के लिए डॉकर हब खाता बनाना होगा। एक ओपन सोर्स प्रोग्राम है , इसलिए शायद हम असीमित खाते के लिए पात्र होंगे।

अगर यह मदद करता है तो मैं आवेदन कर सकता था। लेकिन पहले हमें यह पता लगाना चाहिए कि असल में समस्या क्या है।

मुझे नहीं पता कि डॉकर हब दर सीमा को कैसे ट्रैक करता है। मुझे लगता है कि यह आईपी पर आधारित है, अन्यथा स्थानीय रूप से रीसेट करना बहुत आसान होगा। उस स्थिति में, क्या हमारा बिल्ड सर्वर एकमात्र ऐसी चीज है जो इस आईपी के माध्यम से डॉकर हब को दिखाई देगी?

हां, बिल्ड सर्वर में एक समर्पित आईपी है, यहां तक ​​​​कि कई भी हैं, और सीआई ही एकमात्र हिस्सा है जो डॉकर का उपयोग करता है।

अगर यह केवल 14 डॉकर छवियां हैं और हम केवल मासिक खींचते हैं तो हमें किसी भी सीमा से नीचे होना चाहिए?

ऐसा लगता है कि जेनकिंस पाइपलाइन एक नौकरी चलाती है (मुझे लगता है कि वेबसाइट के लिए) जो हर समय डॉकर हब से खींचने की कोशिश करती है: https://build.libelektra.org/blue/organizations/jenkins/libelektra/detail/PR-3589 /5/पाइपलाइन/696

AFAIK ऐसा build --pull के उपयोग के कारण होता है।

हमें शायद डिफ़ॉल्ट रूप से केवल build (बिना --pull ) का उपयोग करना चाहिए और इसे --pull साप्ताहिक या मासिक के साथ चलाना चाहिए।

पता लगाने के लिए धन्यवाद! :स्पार्कलिंग_हार्ट:

इस समस्या का कारण खोजने के लिए धन्यवाद!

वैकल्पिक रूप से --pull को हटाने के लिए, हम अभी तक इलेक्ट्रा स्थापित किए बिना वेबुई आधार के लिए एक आधार छवि भी बना सकते हैं (केवल निर्भरता और स्थापित gtests के साथ)। यह आधार छवि तब होगी - अन्य लोगों की तरह - मासिक रूप से निर्मित और वेबुई आधार छवि इस आधार छवि से विस्तारित होगी और केवल हमारी निजी डॉकटर रजिस्ट्री से खींची जाएगी (और इस तरह पुल सीमा को प्रभावित नहीं करेगी)

इलेक्ट्रा के बिना वेबुई बेस अभी तक स्थापित है

मुझे यह विचार पसंद है! डॉकर पुल सीमा के बावजूद यह एक सुधार होगा!

इलेक्ट्रा के बिना वेबुई बेस अभी तक स्थापित है

हाँ, यह भी एक विकल्प होगा। विचाराधीन छवि पहले से ही वास्तविक webui और elektrad छवियों के लिए मूल छवि है। इसलिए हम इलेक्ट्रा की प्रतिलिपि बनाने और निर्माण को अन्य Dockerfiles में स्थानांतरित कर सकते हैं। या हो सकता है कि मल्टी-स्टेज बिल्ड के साथ कोई समाधान हो? सुनिश्चित नहीं है, अगर मध्यवर्ती चरणों को रजिस्ट्रियों से धकेला/खींचा जा सकता है।

कल मैं जेनकींस पर साझा पुस्तकालय का परीक्षण कर रहा था जहां केवल पुल-स्टेज निष्पादित किया गया था। कोई छवि निर्माण नहीं, केवल हब.लिबेलेक्ट्रा.org पर हमारी निजी डॉकटर रजिस्ट्री से खींच रहा है और मुझे अभी भी डॉकर दर सीमा त्रुटि मिली है। मैंने थोड़ा और गहराई से देखा और अपनी समस्या का कारण खोजने में कामयाब रहा।
यह watchtower , एक कंटेनर चल रहा है जो निर्दिष्ट अंतराल पर हमारी छवियों को अपडेट करता है। इस मुद्दे को उनकी नवीनतम रिलीज में तय किया जाना चाहिए। मैं इस छवि को अपडेट करूंगा और पोल इंटरवेल को उच्च मान पर सेट करूंगा।
वॉचटावर कंटेनर के लॉग भी मेरी धारणा की पुष्टि करते हैं।

time="2020-11-16T22:22:58Z" level=info msg="Unable to update container /frontend_repo_1, err='Error response from daemon: toomanyrequests: You have reached your pull rate limit. You may increase the limit by authenticating and upgrading: https://www.docker.com/increase-rate-limit'. Proceeding to next."
time="2020-11-16T22:22:59Z" level=info msg="Unable to update container /frontend_registry_1, err='Error response from daemon: toomanyrequests: You have reached your pull rate limit. You may increase the limit by authenticating and upgrading: https://www.docker.com/increase-rate-limit'. Proceeding to next."
time="2020-11-16T22:23:00Z" level=info msg="Unable to update container /frontend_letsencrypt-nginx-proxy-companion_1, err='Error response from daemon: toomanyrequests: You have reached your pull rate limit. You may increase the limit by authenticating and upgrading: https://www.docker.com/increase-rate-limit'. Proceeding to next."
time="2020-11-16T22:23:01Z" level=info msg="Unable to update container /frontend_nginx-proxy_1, err='Error response from daemon: toomanyrequests: You have reached your pull rate limit. You may increase the limit by authenticating and upgrading: https://www.docker.com/increase-rate-limit'. Proceeding to next."
time="2020-11-16T22:23:02Z" level=info msg="Unable to update container /frontend_watchtower_1, err='Error response from daemon: toomanyrequests: You have reached your pull rate limit. You may increase the limit by authenticating and upgrading: https://www.docker.com/increase-rate-limit'. Proceeding to next."
time="2020-11-16T22:23:04Z" level=info msg="Unable to update container /frontend_libelektra-webui_1, err='Error response from daemon: toomanyrequests: You have reached your pull rate limit. You may increase the limit by authenticating and upgrading: https://www.docker.com/increase-rate-limit'. Proceeding to next."
time="2020-11-16T22:23:28Z" level=info msg="Unable to update container /frontend_repo_1, err='Error response from daemon: toomanyrequests: You have reached your pull rate limit. You may increase the limit by authenticating and upgrading: https://www.docker.com/increase-rate-limit'. Proceeding to next."
time="2020-11-16T22:23:29Z" level=info msg="Unable to update container /frontend_registry_1, err='Error response from daemon: toomanyrequests: You have reached your pull rate limit. You may increase the limit by authenticating and upgrading: https://www.docker.com/increase-rate-limit'. Proceeding to next."
time="2020-11-16T22:23:30Z" level=info msg="Unable to update container /frontend_letsencrypt-nginx-proxy-companion_1, err='Error response from daemon: toomanyrequests: You have reached your pull rate limit. You may increase the limit by authenticating and upgrading: https://www.docker.com/increase-rate-limit'. Proceeding to next."

यह जानने के लिए आपका बहुत-बहुत धन्यवाद :sparkling_heart:

@robaerd क्या हम इसे बंद कर सकते हैं या कुछ और करना है?

आर्टिफैक्ट चरण (वेबुई, वेबसाइट, पैकेज परीक्षण) में उपयोग की जाने वाली सभी डॉकर छवियां अभी भी हमारी निजी रजिस्ट्री के बजाय docker.org से खींची जाती हैं। मुझे लगता है कि यह शायद एक अलग मुद्दे में होना चाहिए क्योंकि हम इसके साथ डॉकर पुल-लिमिट को कभी भी पार नहीं करेंगे। लेकिन वॉचटावर छवि अद्यतन के बाद से, इस समस्या को ठीक किया जाना चाहिए और IMHO को बंद किया जा सकता है।

शायद और कुछ करने की जरूरत नहीं है। यदि हम सीमा से नहीं टकराते हैं, तो docker.org से खींचना ठीक है।