Virtualenv: --संबंधी विकल्प

स्थानांतरित-सक्षम ध्वज हमेशा प्रायोगिक रहा है, और वास्तव में कभी काम नहीं किया गया; हम अब इसका समर्थन नहीं करते हैं और सुविधा को पूरी तरह से छोड़ दिया गया है (इसलिए प्रमुख रिलीज)। अपने उपयोग के मामले की व्याख्या करें, और हम वैकल्पिक दृष्टिकोण का सुझाव देने में सक्षम हो सकते हैं।

CMD export branch && cd /build_dir && \
 apt-get update -y && apt-get upgrade -y && \
 pip3 install virtualenv && \
 virtualenv --always-copy --python=python3 env && \
 git clone http://user:pass@gitlab/dev/repo.git && \
 cd /build_dir/veil-repo/code/veil-common && \
 git checkout $branch && \
 python3 install.py -p /build_dir/veil-repo/code/cli-app/ -v /build_dir/env && \
 python3 install.py -p /build_dir/veil-repo/code/controller/ -v /build_dir/env && \
 python3 install.py -p /build_dir/veil-repo/code/node/ -v /build_dir/env && \
 cd /build_dir/ && \
 ./env/bin/pip3 install -r requirements.txt && \
 virtualenv --relocatable env

यह डॉकरफाइल का एक अंश है। अगर मैं --relocatable झंडा हटाऊंगा तो कोड सही ढंग से काम करेगा? यही है, मुझे अपना अलग वातावरण बनाने की जरूरत है, जिसे मैं किसी भी तरह से कॉपी कर सकता हूं।

एक कर्ता के अंदर, मैं कहूंगा कि यह ९ ०% होगा। लेकिन यह सुनिश्चित करने के लिए कि आपको उस डॉक कोड के साथ संपर्क करना होगा, जो वास्तव में सूक्ष्म अंतर पर हो सकता है कि हम कैसे भरोसेमंद संभाले।

हमने इस सुविधा का उपयोग कभी-कभी किया क्योंकि हमारा CI सिस्टम लंबे नामों वाले निर्देशिकाओं में virtualenvs बनाएगा। यह नाम काफी लंबा होगा कि #! बहुत लंबा होगा और हम env में स्क्रिप्ट निष्पादित नहीं कर सकते।

@ Nitori- उन मामलों के लिए जिन्हें सामान्य रूप से टूल लागू करने के लिए python -m फॉर्म का उपयोग करने की अनुशंसा की जाती है

सही है। हालांकि कई पायथन पैकेज खराब व्यवहार करते हैं और अपने आप को इस तरह लागू नहीं होने देते।

@ Nitori- भले ही आप हमेशा बाइनरी फ़ोल्डर के भीतर अजगर दुभाषिया के माध्यम से निष्पादकों को आमंत्रित करके आह्वान को मजबूर कर सकते हैं; जैसे

{venv}/bin/python {venv}/bin/bad-bad-tool

जहां {venv} मनमाने ढंग से लंबे

मेरी कंपनी में हम अपनी पाइपलाइनों में --relocatable ध्वज का उपयोग करते हैं ताकि हमें एक virtualenv का पुन: उपयोग करने और समय बचाने में मदद मिले - हम GitLab का उपयोग करते हैं, एक प्रारंभिक चरण में virtualenv का निर्माण करते हैं, इसे एक विरूपण साक्ष्य के रूप में सहेजते हैं और फिर इसे चलाने के लिए इसे फिर से चलाते हैं समानांतर परीक्षणों का गुच्छा।

हमने virtualenv के संस्करण को पिन करने का इरादा किया था, लेकिन एक बग के कारण हमने नवीनतम को खींचना समाप्त कर दिया, इसलिए आज सुबह हमारी पाइपलाइन टूट गई। हमने उस बग को ठीक कर दिया है, इसलिए इसे पिन किया गया है और अब सब कुछ चल रहा है, और हम ध्वज को हटाए जाने के चारों ओर एक रास्ता खोज लेंगे। लेकिन, सोचा था कि मैं इस मुद्दे को बंद करने के बावजूद अपने अनुभव से अवगत कराऊंगा और मुझे उम्मीद है कि झंडा आगे बढ़ने का समर्थन नहीं करेगा।

नए ऐप डेटा सीडर के साथ एक वर्चुअनव्यू बनाने में सिर्फ 100ms से कम का समय लगता है, यह दृष्टिकोण आपके उपयोग के मामले में पसंद किया जाता है।

हम एक rpm में एक वेनव को बंडल करने के लिए --relocatable का उपयोग करते हैं। virtualenv $ DESTDIR में बनाया गया है और अंत में /opt/company ।

यह मेरा मामला है।

तो उत्पन्न रास्तों के लिए अंतिम लक्ष्य अग्रिम में पारित करने में सक्षम होने में मदद करेगा?

@gaborbernat हाँ!

@gaborbernat अभी भी, अंतिम स्थान पर तैनाती से पहले,

सुनिश्चित नहीं है कि यहां क्या एक अच्छा समाधान है am मैं प्रस्तावों के लिए खुला हूं।

इस तरह के मामले के लिए @gaborbernat , मानक व्यवहार बिल्डडिर और उपसर्ग को अलग करने के लिए है।

virtualenv के पास DEST_DIR तर्क है जो इस मामले में भ्रामक हो सकता है। DEST_DIR वास्तविक वेनव स्थान है, जो प्रभावी रूप से एक उपसर्ग है (जैसे / usr, / usr / स्थानीय, आदि)। तो हो सकता है, virtualenv LOCATION दस्तावेजीकरण यह स्पष्ट कर दे।

फिर आप --destdir या --root विकल्प जोड़ सकते हैं, जो / लिए डिफॉल्ट करता है। इस तरह, virtualenv destdir (कुछ हद तक चुरोट) की तरह अलग-थलग काम कर सकता है। मुझे नहीं पता कि अजगर, पाइप और अन्य लिपियों को इससे कैसे जूझना पड़ेगा।

AFAIK समस्या यह है कि सभी जेनरेट की गई कंसोल स्क्रिप्ट्स शेबंग के लिए निर्माण के दौरान पथ को हार्डकोड करती हैं। इन जनरेट किए गए कंसोल स्क्रिप्ट को बनाने के लिए कोई मानक तरीका नहीं है, जिसमें वे निर्माण के दौरान और रनिंग के बाद काम करने के दौरान दोनों के साथ काम करते हैं। यह तब तक है जब तक कि निर्माण के बाद कोई भी शगुन को ठीक नहीं करता। लेकिन यह अब आभासी पर्यावरण के निर्माण के दायरे से बाहर है, इसलिए हमारे नियंत्रण से बाहर है।

@gaborbernat का मतलब है कि हमें इसे सेटपूलों में लागू करना चाहिए? निर्माण समय में और लक्ष्य स्थान पर दोनों अलग-अलग उपयोग किए जा सकते हैं?

मैं एक virtualenv-relocate स्क्रिप्ट लिखने के बारे में सोच रहा हूं जो मौजूदा वर्चुअन पर शेबंग्स को संपादित करता है, जिससे यह अपने नए स्थान पर उपयोग करने योग्य है। कुछ इस तरह :

$ virtualenv-relocate /build/dir/venv /opt/company/app/venv
Rewriting shebang of bin/pip.
Rewriting shebang of bin/pip3.5.
...
$

मुझे नहीं लगता कि सेटपूल इसके लिए एक अच्छी जगह है। यह एक सुविधा है जो निर्माण प्रणाली का हिस्सा होना चाहिए जो स्थान A में बनाता है लेकिन फिर स्थान B पर लागू होता है।

खैर, सी प्रोजेक्ट केवल PATH और LD_LIBRARY_PATH को संपादित करके अलग-अलग बनाने की अनुमति देता है। कोई फर्क नहीं पड़ता कि आप किस निर्माण प्रणाली का उपयोग करते हैं।

मैं इस बात से परिचित नहीं हूँ कि C इसे कैसे प्राप्त करता है, शायद कोई इसे समझा सकता है, इससे लिंक कर सकता है? इससे पहले क्या हो रहा है यहां https://github.com/pypa/virtualenv/blob/legacy/virtualenv.py#L1880 -L1894; हम मूल रूप से कुछ रास्तों को सापेक्ष बनाने की कोशिश कर रहे हैं: स्क्रिप्ट और pth / egg-files।

मेरी रिपॉजिटरी भी उपयोग कर रही है-relocatable और मैं स्क्रिप्ट का उपयोग कर रहा हूं (रिलेक्वेबल वर्चुअल एनवी के बाद) को वर्चुअलाइज करने के लिए अतिरिक्त लाइब्रेरीज़ कॉपी करना होगा। इसके साथ, virtualenv को बनाना संभव था जो पूरी तरह से relocatable है। उदाहरण के लिए, हम इसे विंडोज़ पर उपयोग करते हैं और अपने इंस्टॉलर में वर्चुअन को जोड़ते हैं। स्थापना के बाद python3 प्रोग्राम पैकेज्ड वर्चुअनव के साथ ठीक काम कर रहे हैं।

वही usecase भी हमारे लिए मैक और लिनक्स पर काम करता है ...।

@ Gagi2k आप वहाँ क्या करते हैं पहले से ही वर्तमान relocatable कार्यान्वयन की नाजुकता दिखाया; एन्वा को पूरी तरह से स्थानांतरित करने के लिए बनाए जाने के बाद आपको कुछ अतिरिक्त स्क्रिप्ट करने की आवश्यकता थी। समस्या यह है कि आप एक पैकेज को कैसे पूरी तरह से स्थानांतरित कर सकते हैं जो आपके लक्षित वातावरण पर बहुत अधिक निर्भर है। तो यहाँ विचार यह है कि वर्चुअन स्वयं अपने वातावरण को पूरी तरह से भरोसेमंद बनाने की कोशिश कर रहा है (क्योंकि यह बहुत से मामलों में सफल नहीं हो सकता है) ... और इसके बजाय पूरी तरह से इस कस्टम स्क्रिप्ट को लिखने वाले लोगों को काम सौंपता है, जो इसे प्राप्त करते हैं; स्क्रिप्ट जिसमें लक्ष्य वातावरण का ज्ञान होता है, इसलिए किसी चीज़ को स्थानांतरित करने के लिए वास्तव में बस और क्या-क्या परिवर्तनों की आवश्यकता होती है।

सच, निष्पक्ष बिंदु।

मेरी समस्या कम या ज्यादा है कि अब मुझे आपके द्वारा पहले प्रदान की गई कार्यक्षमता को फिर से बनाने और सभी प्लेटफार्मों पर परीक्षण करने की आवश्यकता है + कई डिस्ट्रोस पुराने फ़ंक्शन के समान करने के लिए।

मुझे लगता है कि मैं अब तक के लिए एक पुराने वर्चुअन संस्करण के साथ छड़ी करने की कोशिश करूंगा जब तक कि मुझे या किसी और के पास इसे लागू करने का समय न हो।

@ Gagi2k एक virtualenv-relocate प्रोजेक्ट विचार के बारे में मेरी टिप्पणी देखें। मुझे अन्य के साथ इस पर सहयोग करने में खुशी होगी। https://github.com/spotify/dh-virtualenv/ एक अच्छा शुरुआती बिंदु हो सकता है।

@ वॉरेस थैक्स , मैंने पहले ही पुराने कोड को कॉपी कर लिया था और उसमें से एक स्टैंडअलोन पायथन स्क्रिप्ट बनाई थी। मुझे लगता है कि मैं अभी के लिए ड्रॉप-इन-सॉल्यूशन के रूप में उपयोग करूंगा, लेकिन मुझे भविष्य में किसी और चीज पर स्विच करने या मेरे द्वारा लिखी गई स्क्रिप्ट में योगदान करने में खुशी होगी।

@ Gagi2k क्या आप इसे साझा करना चाहेंगे?

@ घड़ी यह अभी भी प्रगति पर है: https://codereview.qt-project.org/c/qt/qtivi/+/290859

पूरे virtualenv 20 अद्यतन प्रत्याशित की तुलना में अधिक समस्याओं का कारण बनता है। स्क्रिप्ट को रीकॉन्सेबल बनाने के लिए पुरानी कार्यक्षमता का पुन: उपयोग करना कोई बड़ी बात नहीं है, लेकिन क्योंकि यह अब वेनव पर आधारित है और उस pyvenv.cfg के साथ यह अधिक जटिल हो जाता है। उदाहरण के लिए विंडोज़ पर पुराने virtualenv ने बहुत से आधार py फ़ाइलों की प्रतिलिपि बनाई है/ लिब / अजगर(या इसे सीलिंक किया गया)। अब उनकी नकल नहीं की जाती है, लेकिन पाइवेनव मूल स्थान की ओर इशारा करता है। एक बार जब मूल स्थान अपडेट हो जाता है तो आपके वर्चुअन को इसे संभालने की आवश्यकता होती है और आपको यह आशा करने की आवश्यकता होती है कि अभी भी सब कुछ आवश्यक है। इससे भी बड़ी समस्या https://bugs.python.org/issue39469 है , जो इसे एक सापेक्ष स्थान से गुजरना कठिन बनाता है जहां आप virtualenv को स्थानांतरित करने के लिए सब कुछ सेटअप करते हैं ...

अभी के लिए, मुझे नहीं लगता कि यह किया जा सकता है (बिना pyvenv.cfg इसका समर्थन करते हुए)।

@gaborbernat मैं जो इसका मूल उद्देश्य है, उसके लिए virtualenv का दुरुपयोग हो सकता है, लेकिन अपने आवेदन के साथ अपनी खुद की python3 प्रतिलिपि प्रदान करने का आधिकारिक तरीका क्या है, जैसा कि आप लोगों को पाइप का उपयोग करके इसे विस्तारित करने की अनुमति देना चाहते हैं?

@ Gagi2k मुझे यकीन है कि मैं यहाँ कुछ याद कर रहा हूँ; लेकिन क्या आप किसी दिए गए मशीन पर स्थापित चरण के हिस्से के रूप में pyenv.cfg hone को बदल नहीं सकते हैं?

@gaborbernat मैं जो इसका मूल उद्देश्य है, उसके लिए virtualenv का दुरुपयोग हो सकता है, लेकिन अपने आवेदन के साथ अपनी खुद की python3 प्रतिलिपि प्रदान करने का आधिकारिक तरीका क्या है, जैसा कि आप लोगों को पाइप का उपयोग करके इसे विस्तारित करने की अनुमति देना चाहते हैं?

आभासी वातावरण हमेशा एक मशीन पर कुछ अजगर दुभाषिया के लिए एक संदर्भ के लिए डिजाइन किए गए थे। आधार धारणा यह है कि आपके पास मशीन पर पूरी तरह से काम करने वाला अजगर वातावरण है, और आप बस इसके लिए कई अलग-अलग site-packages हैं। मैं लिंक को पूरी तरह से स्पष्ट नहीं बनाने के लिए कुछ मूल्य देख सकता हूं (जैसा कि अब पूरी तरह से स्पष्ट पथ के साथ है), लेकिन यदि आप उस रास्ते से नीचे जा रहे हैं तो सभी PyInstaller या pex का उपयोग करें। किसी भी आसान संदर्भ को तोड़ने के बिना अजगर निष्पादन योग्य अग्रिम?

@gaborbernat ज़रूर, यह काम करेगा, सबसे बड़ी समस्या यह है कि ज्यादातर उपयोगकर्ताओं को स्थापना के बाद फ़ोल्डर का नाम बदलने में सक्षम होने के लिए उपयोग किया जाता है और यह काम करता रहता है ...
लेकिन मुझे अभी पता चला है कि PYTHONHOME सेट करने के साथ-साथ ट्रिक भी करता है, कम से कम विंडोज़ पर तो मैंने इसे मूल इंस्टॉलेशन के संदर्भ में काम किए बिना प्राप्त किया।

pex दिलचस्प लगता है और मैं संकेत के लिए अधिक बारीकी से, thx को देखूंगा।

@gaborbernat अभी भी, एक बिल्डडियर में एक वर्चुअन कैसे बनायें और इसे एक .deb या .rpm में शिप करें?

@gaborbernat ज़रूर, यह काम करेगा, सबसे बड़ी समस्या यह है कि ज्यादातर उपयोगकर्ताओं को स्थापना के बाद फ़ोल्डर का नाम बदलने में सक्षम होने के लिए उपयोग किया जाता है और यह काम करता रहता है ...

यकीन नहीं होता कि वे ऐसा क्यों करते हैं। यह मामला कभी नहीं था; यहां तक ​​कि स्थानांतरित करने योग्य ध्वज के साथ, यह संभव मामलों के सबसेट में सच था। इसलिए यह v20 के साथ क्यों मिला।

@gaborbernat अभी भी, एक बिल्डडियर में एक वर्चुअन कैसे बनायें और इसे एक .deb या .rpm में शिप करें?

@ घबराना यह आपके उपयोग के मामले पर निर्भर करता है। क्या डिबेट / आरपीएम गारंटी देता है कि लक्ष्य मशीन पर एक ही स्थान पर अजगर उपलब्ध होगा? यदि ऐसा है तो बस स्थापना के दौरान शेबंग पथ को ठीक करें

अजगर के आधार पर

पोस्टस्टीन पर स्थापित फ़ाइलों को संशोधित करना एक बहुत बुरा विचार है। इसके लिए सभी स्क्रिप्टों को dpkg दायरे से बाहर करने की आवश्यकता है, इस प्रकार dpkg उन्हें अपग्रेड पर नहीं छूते हैं। यह स्वीकार्य नहीं है।

AFIAK, सबसे अच्छा समाधान एक virtualenv-change-prefix destdir , जो अंतिम पैकेज को संग्रहीत करने से पहले निष्पादित किए जाने वाले

@ घबराहट और क्या आप करने के लिए चरवाहों सेट होगा?

@gaborbernat पूर्ण लक्ष्य स्थान। जैसे #!/opt/company/app/venv/bin/python ।

अब इसका मतलब यह होगा कि उस पैकेज को / अलावा किसी अन्य नए रिफॉरोट में तैनात करना अब समर्थित नहीं है?

@gaborbernat हाँ, डिज़ाइन द्वारा। Dpkg / rpm द्वारा प्रबंधित फ़ाइलों को उपयोगकर्ताओं द्वारा इधर-उधर नहीं किया जाना चाहिए।

यह relocatable से कुछ अलग है। उद्देश्य शिरा रिश्तेदार बनाने के लिए नहीं है, लेकिन बिल्डडिर (डेबियन / बिल्ड / ... या% बिल्डडिर) और रुंडिर (/) को भेद करने के लिए है।

इसे बंद करना क्योंकि हमारी ओर से कोई कार्रवाई योग्य वस्तु नहीं है। मैं यहां निरंतर चर्चा की सलाह दूंगा, या संभावित परियोजनाओं पर जो कि virtualenv के शीर्ष पर इससे निपटने की कोशिश करेंगे।

वास्तव में, एक विकल्प कुछ विक्रेताओं की निर्भरता है, उन्हें संस्करण के बिना।

मेरे मामले में, मुझे आवश्यक निर्भरता के साथ एक अजगर पैकेज को ज़िप करना होगा और इसे वितरित स्पार्क क्लस्टर पर अपने कार्यक्रम के चलने के लिए यार्न पर स्पार्क के लिए एक 'संग्रह' के रूप में पास करना होगा। हालांकि यह ऑपरेशन एनाकोंडा द्वारा समाप्त किया जा सकता है, मेरी कंपनी में एंटरप्राइज़ सॉफ़्टवेयर का उपयोग नहीं किया जा सकता है। relocatable अतीत में इस समस्या को हल कर सकते हैं, लेकिन अब यह गायब हो गया।

मेरे मामले में, मुझे आवश्यक निर्भरता के साथ एक अजगर पैकेज को ज़िप करना होगा और इसे वितरित स्पार्क क्लस्टर पर अपने कार्यक्रम के चलने के लिए यार्न पर स्पार्क के लिए एक 'संग्रह' के रूप में पास करना होगा। हालांकि यह ऑपरेशन एनाकोंडा द्वारा समाप्त किया जा सकता है, मेरी कंपनी में एंटरप्राइज़ सॉफ़्टवेयर का उपयोग नहीं किया जा सकता है। relocatable अतीत में इस समस्या को हल कर सकते हैं, लेकिन अब यह गायब हो गया।

हाय @jackhhh , क्या आपको मौजूदा उपयोग के मामले के लिए वर्कअराउंड मिला?
हम उसी मुद्दे पर चल रहे हैं।