Aws-cli: [v2] अल्पाइन / musl libc . के लिए बायनेरिज़ वितरित करें

मैंने इस मुद्दे को डीबग करने का प्रयास किया, और यह पता नहीं लगा सका कि यह क्यों विफल रहता है। ऐसा लगता है कि इंस्टॉल स्क्रिप्ट बस थोड़ी सी परतदार है। मैंने v2 लेबल भी जोड़ने की कोशिश की।

हमारे द्वारा प्रकाशित बायनेरिज़ alpine आधार पर डॉकर छवियों पर काम नहीं करेंगे क्योंकि हम उन्हें ग्लिब के खिलाफ संकलित कर रहे हैं। जब आप इस बाइनरी को निष्पादित करने का प्रयास करते हैं तो sh: aws2: not found क्या होता है। यदि आप इसे ubuntu:latest जैसी छवि पर आज़माते हैं तो इंस्टॉलर काम करेगा।

इसके अतिरिक्त, मुझे नहीं लगता कि हम कभी भी एक अल्पाइन संगत बाइनरी जारी करेंगे जैसे हम अपने सामान्य लिनक्स बाइनरी के लिए कर रहे हैं। मुझे लगता है कि हम केवल एक डोकर छवि जारी करने के इच्छुक होंगे जो अल्पाइन पर बने हमारे बाइनरी के साथ आता है।

आपके उत्तर के लिए धन्यवाद। क्या यह दस्तावेज करना संभव है कि यहां https://docs.aws.amazon.com/cli/latest/userguide/install-cliv2-linux.html "लिनक्स के लिए पूर्वापेक्षाएँ" के तहत, या अल्पाइन आधारित त्रुटि को अधिक उपयोगकर्ता के अनुकूल बनाएं छवि का मामला?

हम इसे उपयोगकर्ता मार्गदर्शिका में अपडेट करना सुनिश्चित करेंगे। मुझे इस मामले के लिए अधिक उपयोगकर्ता के अनुकूल त्रुटि संदेश बनाने का विचार भी पसंद है।

@joguSD बमर, अल्पाइन डॉकर छवियों के लिए मानक है। विशेष रूप से बिल्ड / सीआई सिस्टम के साथ स्वचालित करना चाहते हैं और बहुत बड़ी डॉकर छवियों को लगातार डाउनलोड नहीं करना चाहते हैं।

हालांकि, बाइनरी को किसी अन्य डॉकर छवि में कॉपी करने के लिए मल्टी स्टेज बिल्ड में आधिकारिक अल्पाइन डॉकर छवि का उपयोग कर सकते हैं।

@chadgrant - क्या आप कृपया अपने मल्टी-स्टेज dockerfile का उदाहरण दे सकते हैं?

@ बराकबीडी-वैश्विकता मेरे पास एक नहीं है, लेकिन अगर एडब्ल्यूएस-अल्पाइन छवि कभी बनती है तो आप बस यह कर सकते हैं:

FROM aws_alpine_image:latest as aws
FROM alpine:latest
COPY --from=aws /usr/local/bin/binary /usr/local/bin/binary

बहुत बुरा वे अल्पाइन का समर्थन नहीं करते हैं। यह एक मानक छवि है।

इसके अतिरिक्त, मुझे नहीं लगता कि हम कभी भी एक अल्पाइन संगत बाइनरी जारी करेंगे जैसे हम अपने सामान्य लिनक्स बाइनरी के लिए कर रहे हैं। मुझे लगता है कि हम केवल एक डोकर छवि जारी करने के इच्छुक होंगे जो अल्पाइन पर बने हमारे बाइनरी के साथ आता है।

@joguSD क्या इस पर कोई चर्चा या प्रस्ताव हुआ है? अल्पाइन की व्यापकता को देखते हुए यह एक बहुत बड़ी बात लगती है। मेरे जैसे लोग अपने सीसीडी और अन्य स्वचालन में aws का उपयोग करते हैं, इसलिए यदि यह अल्पाइन-आधारित छवियों के लिए उपलब्ध नहीं है, तो संस्करण 2 का उपयोग करना महत्वपूर्ण कार्य के बिना एक विकल्प भी नहीं है! धन्यवाद।

busybox में भी स्थापित नहीं हो सकता

दिलचस्प बात यह है कि यदि आप इसे आधार छवि के रूप में उपयोग करते हैं तो एडब्ल्यूएस क्ली इंस्टॉल हो जाएगा और ठीक से काम करेगा।

अपनाने से openjdk/openjdk11:alpine

मैं निम्नलिखित Dockerfile का उपयोग करके ऐसा करने में सक्षम था:

FROM adoptopenjdk/openjdk11:alpine

RUN apk add --no-cache \
        ca-certificates \
        unzip \
        curl \
        groff \
        less  \
        bash  \
        openssh-client

WORKDIR /home
RUN curl "https://awscli.amazonaws.com/awscli-exe-linux-x86_64.zip" -o "awscliv2.zip" \
    && unzip awscliv2.zip \
    && ./aws/install \
    && rm awscliv2.zip \
    && rm -R aws

एडॉप्टोपेनजेडके छवि काम करने का कारण यह है कि उनमें लापता ग्लिब पुस्तकालय शामिल हैं। एल्फ़ाइन लाइनक्स 'मुसल ग्लिबक' पर आधारित है, जो फुलब्लाऊन ग्लिबक का हल्का-फुल्का विकल्प है। aws cli v2 बायनेरिज़ musl के साथ काम नहीं करते हैं, उन्हें काम करने के लिए कुछ और लाइब्रेरी की आवश्यकता होती है।

जावा छवि का उपयोग करने के बजाय, आप नीचे दिए गए Dockerfile का उपयोग एक उदाहरण के रूप में भी कर सकते हैं कि अल्पाइन लिनक्स पर AWS CLI v2 कैसे चलाया जाए:

FROM alpine:3.11

ENV GLIBC_VER=2.31-r0

# install glibc compatibility for alpine
RUN apk --no-cache add \
        binutils \
        curl \
    && curl -sL https://alpine-pkgs.sgerrand.com/sgerrand.rsa.pub -o /etc/apk/keys/sgerrand.rsa.pub \
    && curl -sLO https://github.com/sgerrand/alpine-pkg-glibc/releases/download/${GLIBC_VER}/glibc-${GLIBC_VER}.apk \
    && curl -sLO https://github.com/sgerrand/alpine-pkg-glibc/releases/download/${GLIBC_VER}/glibc-bin-${GLIBC_VER}.apk \
    && apk add --no-cache \
        glibc-${GLIBC_VER}.apk \
        glibc-bin-${GLIBC_VER}.apk \
    && curl -sL https://awscli.amazonaws.com/awscli-exe-linux-x86_64.zip -o awscliv2.zip \
    && unzip awscliv2.zip \
    && aws/install \
    && rm -rf \
        awscliv2.zip \
        aws \
        /usr/local/aws-cli/v2/*/dist/aws_completer \
        /usr/local/aws-cli/v2/*/dist/awscli/data/ac.index \
        /usr/local/aws-cli/v2/*/dist/awscli/examples \
    && apk --no-cache del \
        binutils \
        curl \
    && rm glibc-${GLIBC_VER}.apk \
    && rm glibc-bin-${GLIBC_VER}.apk \
    && rm -rf /var/cache/apk/*

उपरोक्त ग्लिबक पुस्तकालयों को डाउनलोड करेगा, एडब्ल्यूएस सीएलआई v2 को डाउनलोड और इंस्टॉल करेगा, और कुछ ऐसे सामान को हटा देगा जिनकी हमें शायद आवश्यकता नहीं है, जैसे ऑटो-पूर्ण। परिणामी छवि लगभग 100MB आकार की है

तो एक डॉकटर कंटेनर के अंदर aws ecr get-login-password … | docker login … प्राप्त करने का सबसे छोटा रास्ता क्या है? (जिसका अर्थ है: docker:dind )?

मुझे docker:dind समर्थन के साथ अपनी खुद की docker:stable छवि बनाने से बचना अच्छा लगेगा। कम से कम मैं https://github.com/aws/aws-cli/issues/4685#issuecomment -615872019 समाधान के लिए धन्यवाद कर सकता हूं। उसके लिए धन्यवाद!

@bentolor चूंकि docker:dind भी अल्पाइन का उपयोग करता है, मुझे संदेह है कि आपको बस इतना करना है कि उपर्युक्त Dockerfile की पहली पंक्ति को बदलना है। FROM alpine:3.11 बजाय आपको FROM docker:dind उपयोग करना चाहिए। इसका मतलब यह है कि आप अपनी खुद की छवि बना रहे हैं, हालांकि...

धन्यवाद @blagerweij वास्तव में अच्छी तरह से काम करता है

इसके अलावा धन्यवाद @blagerweij : मैंने बिछुआ को https://hub.docker.com/r/bentolor/docker-dind-awscli

@bentolor मैं अपने रेपो में देखा है कि आपका Dockerfile का उपयोग करता है FROM docker:stable के बजाय FROM docker:dind । मैंने सोचा था कि पूरी बात एडब्ल्यूएस समर्थन के साथ डॉकर में डॉकर के लिए एक छवि बनाने के लिए थी?

@blagerweij चित्रण के लिए आधिकारिक डॉकर छवि से नीचे दी गई छवि देखें।

सामान्य उपयोग है:

1. एक (या आपका सीआई) docker:dind उदाहरण शुरू करता है और फिर
2. एक अलग docker:stable इंस्टेंस शुरू करता है जो शुरू किए गए docker:dind कंटेनर से जुड़ा होता है
3. आप दूसरे कंटेनर के अंदर docker कमांड निष्पादित करना शुरू करते हैं जो पहले docker:dind कंटेनर के अंदर चल रहे डॉकर डेमॉन को सॉकेट कनेक्शन के माध्यम से कॉमांड्स को रीडायरेक्ट करता है।

इसलिए: हालांकि यह सच है कि docker:dind इंस्टेंस अंततः आपके डॉकर कमांड को निष्पादित करता है, आपका सीएलआई फ्रंटएंड वास्तव में docker:stable इंस्टेंस में रहता है। और यही वह जगह है जहां एक यानी एडब्ल्यूएस में लॉगिन करने की जरूरत है ;-)

कम से कम यह वह उपयोग पैटर्न है जिसके बारे में मुझे पता है (यानी डॉकटर छवियों को बनाने के लिए docker:dind उपयोग परिदृश्य भी हों?

कोई व्यक्ति https://hub.docker.com/r/frolvlad/alpine-glibc/ से ग्लिबक के साथ अल्पाइन छवि का उपयोग कर सकता है
और aws cli निम्नलिखित चरणों को aws प्रलेखन से स्थापित करें। मेरे लिए काम किया।

@blagerweij मैंने आपकी स्क्रिप्ट का उपयोग डॉकटर के साथ किया है। एडब्ल्यूएस क्ली ठीक काम करता है। मुझे अभी निर्माण में त्रुटि मिली है:
/usr/glibc-compat/sbin/ldconfig: /usr/glibc-compat/lib/ld-linux-x86-64.so.2 is not a symbolic link

@amiram हाँ मुझे वह संदेश भी प्राप्त होता है, यह एक चेतावनी है जिसे आप आसानी से अनदेखा कर सकते हैं: यह एक सिम्लिंक की अपेक्षा कर रहा है, लेकिन मौजूद फ़ाइल एक नियमित फ़ाइल है। देखें https://github.com/envoyproxy/envoy/issues/9078#issuecomment -576837432

क्या कोई इस मुद्दे का नाम बदलकर कुछ इस तरह कर सकता है: "अल्पाइन/मुसल के लिए बाइनरी वितरित करें"?

@joguSD @jordanst3wart

हाँ, मैं "अल्पाइन/मुसल libc के लिए बाइनरी वितरित करें" से खुश हूं। अगर आपको कोई समस्या है तो मुझे बताएं

मुझे एक जुनून परियोजना के लिए केवल aws s3 cp की आवश्यकता है, इसलिए मैंने अभी pip के साथ awscli V1 स्थापित किया है:

FROM alpine:3.12
RUN pip install awscli        
RUN aws s3 ..

एडॉप्टोपेनजेडके छवि काम करने का कारण यह है कि उनमें लापता ग्लिब पुस्तकालय शामिल हैं। एल्फ़ाइन लाइनक्स 'मुसल ग्लिबक' पर आधारित है, जो फुलब्लाऊन ग्लिबक का हल्का-फुल्का विकल्प है। aws cli v2 बायनेरिज़ musl के साथ काम नहीं करते हैं, उन्हें काम करने के लिए कुछ और लाइब्रेरी की आवश्यकता होती है।

जावा छवि का उपयोग करने के बजाय, आप नीचे दिए गए Dockerfile का उपयोग एक उदाहरण के रूप में भी कर सकते हैं कि अल्पाइन लिनक्स पर AWS CLI v2 कैसे चलाया जाए:

धज्जी

उपरोक्त ग्लिबक पुस्तकालयों को डाउनलोड करेगा, एडब्ल्यूएस सीएलआई v2 को डाउनलोड और इंस्टॉल करेगा, और कुछ ऐसे सामान को हटा देगा जिनकी हमें शायद आवश्यकता नहीं है, जैसे ऑटो-पूर्ण। परिणामी छवि लगभग 100MB आकार की है

यदि आप ग्लिबक संस्करण को हार्ड कोड नहीं करना चाहते हैं तो यह समायोजन स्वचालित रूप से नवीनतम संस्करण प्राप्त करेगा:

FROM alpine

# install glibc compatibility for alpine
RUN apk --no-cache add \
    binutils \
    curl \
    && GLIBC_VER=$(curl -s https://api.github.com/repos/sgerrand/alpine-pkg-glibc/releases/latest | grep tag_name | cut -d : -f 2,3 | tr -d \",' ') \
    && curl -sL https://alpine-pkgs.sgerrand.com/sgerrand.rsa.pub -o /etc/apk/keys/sgerrand.rsa.pub \
    && curl -sLO https://github.com/sgerrand/alpine-pkg-glibc/releases/download/${GLIBC_VER}/glibc-${GLIBC_VER}.apk \
    && curl -sLO https://github.com/sgerrand/alpine-pkg-glibc/releases/download/${GLIBC_VER}/glibc-bin-${GLIBC_VER}.apk \
    && apk add --no-cache \
    glibc-${GLIBC_VER}.apk \
    glibc-bin-${GLIBC_VER}.apk \
    && curl -sL https://awscli.amazonaws.com/awscli-exe-linux-x86_64.zip -o awscliv2.zip \
    && unzip awscliv2.zip \
    && aws/install \
    && rm -rf \
    awscliv2.zip \
    aws \
    /usr/local/aws-cli/v2/*/dist/aws_completer \
    /usr/local/aws-cli/v2/*/dist/awscli/data/ac.index \
    /usr/local/aws-cli/v2/*/dist/awscli/examples \
    && apk --no-cache del \
    binutils \
    curl \
    && rm glibc-${GLIBC_VER}.apk \
    && rm glibc-bin-${GLIBC_VER}.apk \
    && rm -rf /var/cache/apk/*

आप नीचे दिए गए Dockerfile का उपयोग एक उदाहरण के रूप में भी कर सकते हैं कि अल्पाइन लिनक्स पर AWS CLI v2 कैसे चलाया जाए:

प्रदान की गई डॉकरफाइल/स्क्रिप्ट काम करती है लेकिन इस त्रुटि को प्रदर्शित करती है, जो इसे काम करने से रोकती नहीं है:

aws/install: line 78: /aws/dist/aws: not found

आश्चर्यजनक रूप से, apk add mandoc को aws/install से ठीक पहले चलाने से यह त्रुटि प्रदर्शित नहीं होती है, और इंस्टॉल करने के बाद उस पैकेज को हटाने से कोई बुरा प्रभाव नहीं पड़ता है। यादृच्छिक अन्य पैकेजों में यह सुरक्षात्मक प्रभाव नहीं लगता है।

कोई विचार?

PS apk add less को aws help के सही ढंग से काम करने के लिए आवश्यक है (यह लापता पैकेज groff बारे में शिकायत करेगा अन्यथा)।