Aws-cli: aws s3 cp/mv . में --no-overwrite विकल्प जोड़ें

को निर्मित 6 अक्तू॰ 2017 · 43टिप्पणियाँ · स्रोत: aws/aws-cli

aws s3 cp/mv कमांड के लिए एक सुविधा फ़ंक्शन --no-overwrite होना अच्छा होगा, जो यह जांच करेगा कि फ़ाइल को s3 बाल्टी में डालने से पहले लक्ष्य गंतव्य पहले से मौजूद नहीं है।

बेशक इस तर्क की एडब्ल्यूएस एपीआई (afaik...) द्वारा गारंटी नहीं दी जा सकती है और यह दौड़ की स्थिति आदि के प्रति संवेदनशील है, लेकिन यह अनजाने में हुई गलतियों को रोकने में मददगार होगा!

feature-request s3

स्रोत

alexjurkiewicz

👍129 🎉8

सबसे उपयोगी टिप्पणी

सामुदायिक प्रतिक्रिया के आधार पर, हमने गिटहब मुद्दों पर फीचर अनुरोध वापस करने का निर्णय लिया है।

jamesls 6 अप्रैल 2018

👍41 ❤6

सभी 43 टिप्पणियाँ

सुविधा अनुरोध के रूप में चिह्नित करना। अगर हमने इसे cp या mv में किया तो मुश्किल हिस्सा यह है कि सीएलआई को यह देखने के लिए S3 से पूछताछ करनी पड़ सकती है कि फ़ाइल अपलोड करने का प्रयास करने से पहले मौजूद है या नहीं। तो इसे sync में जोड़ने के लिए और अधिक समझदारी हो सकती है क्योंकि यह पहले से ही ऐसा करता है।

kyleknap 6 अक्तू॰ 2017

👍5

मैं इसे cp और/या mv में भी देखना चाहता हूं।

इसके लिए मैं अभी sync का उपयोग नहीं करने का कारण यह है कि sync में प्रमुख प्रदर्शन समस्याएं हैं यदि गंतव्य बकेट में लक्ष्य निर्देशिका के तहत बहुत सारी मौजूदा फ़ाइलें हैं।

जब आप aws s3 cp --recursive newdir s3://bucket/parentdir/ चलाते हैं, तो यह केवल उन सभी फाइलों पर जाता है, जिन्हें वह वास्तव में कॉपी कर रहा है।

जब आप aws s3 sync newdir s3://bucket/parentdir/ चलाते हैं, तो यह उन फ़ाइलों पर जाता है जिनकी वह प्रतिलिपि बना रहा है, लेकिन फ़ाइलों की पूरी सूची को s3://bucket/parentdir (जिसमें पहले से ही हजारों या लाखों फ़ाइलें हो सकती हैं) में चलता है और प्रत्येक मौजूदा फ़ाइल के लिए मेटाडेटा प्राप्त करता है .

पर्याप्त रूप से बड़े गंतव्य बकेट पर, aws s3 cp --recursive में सेकंड लग सकते हैं और aws s3 sync को उसी डेटा को कॉपी करने में घंटों लग सकते हैं।

स्पष्ट रूप से sync को ठीक करना अच्छा होगा, लेकिन यदि cp में "यह देखने के लिए जांच करें कि फ़ाइल पहले से मौजूद है या नहीं" क्वेरी जोड़ना sync कोड को संशोधित करने की तुलना में अधिक ट्रैक्टेबल समस्या है इसे जल्दी करें, इसके बजाय ऐसा करने का कोई मतलब हो सकता है।

sgrimm-sg 21 अक्तू॰ 2017

👍3

मुझे भी इस फीचर में बहुत दिलचस्पी है। फ़ाइलों को अधिलेखित करने के लिए एक वैकल्पिक संवादात्मक संकेत भी अच्छा होगा।

smaslennikov 21 नव॰ 2017

हाँ @ sgrimm-sg, यह समझ में आता है। मुझे सीएलआई सीपी कमांड देखने में भी दिलचस्पी है जो वास्तव में इन स्थितियों को संभाल सकता है।

shabeebk 21 दिस॰ 2017

इसके लिए aws s3 sync पर एक विकल्प होना बेहद उपयोगी होगा। rsync में यह कार्यक्षमता --ignore-existing के रूप में उपलब्ध है। मेरी प्राथमिकता rsync के समान विकल्प नामों का उपयोग करने का प्रयास करेगी क्योंकि मुझे संदेह है कि बहुत से लोग पहले से ही परिचित हैं rsync ।

jhoblitt 29 जन॰ 2018

👍9

शुभ प्रभात!

AWS CLI से जुड़े फीचर अनुरोधों के लिए UserVoice में हमारे माइग्रेशन के हिस्से के रूप में, हम GitHub पर इस मुद्दे को यहाँ बंद कर रहे हैं।

यह बग रिपोर्ट के साथ बातचीत को कम किए बिना, उन सुविधाओं के लिए खोज करना और उनके लिए समर्थन दिखाना आसान बनाता है, जिनकी आप सबसे अधिक परवाह करते हैं, यह हमें आपके लिए सबसे महत्वपूर्ण सुविधाएं प्राप्त करने देगा।

एक त्वरित UserVoice प्राइमर के रूप में (यदि पहले से परिचित नहीं है): एक विचार पोस्ट किए जाने के बाद, लोग विचारों पर वोट कर सकते हैं, और उत्पाद टीम सबसे लोकप्रिय सुझावों का सीधे जवाब देगी।

हमने गिटहब से मौजूदा फीचर अनुरोध आयात किए हैं - इस मुद्दे को वहां खोजें!

और चिंता न करें, यह समस्या अभी भी पोस्टीरिटी के लिए GitHub पर मौजूद रहेगी। चूंकि यह UserVoice में मूल पोस्ट का केवल-पाठ आयात है, हम अभी भी उन टिप्पणियों और चर्चाओं को ध्यान में रखेंगे जो यहां GitHub मुद्दे पर पहले से मौजूद हैं।

बग की रिपोर्ट करने के लिए GitHub चैनल बना रहेगा।

एक बार फिर, इस मुद्दे को अब इस शीर्षक पर खोज कर पाया जा सकता है: https://aws.uservoice.com/forums/598381-aws-command-line-interface

-एडब्ल्यूएस एसडीके और टूल्स टीम

यह प्रविष्टि विशेष रूप से UserVoice पर यहां पाई जा सकती है: https://aws.uservoice.com/forums/598381-aws-command-line-interface/suggestions/33168406-add-no-overwrite-option-to-aws-s3- सीपी-एमवी

ASayre 6 फ़र॰ 2018

😕2

संबंधित:

GH-404: rsync-like --update को s3 सिंक में जोड़ें
GH-1449: aws s3 सिंक --मौजूदा
सुझाव: aws s3 cp/mv . में --no-overwrite विकल्प जोड़ें
सुझाव: aws s3 सिंक --मौजूदा
सुझाव: rsync-like --update को s3 सिंक में जोड़ें

kenorb 13 फ़र॰ 2018

jamesls 6 अप्रैल 2018

👍41 ❤6

@jamesls यह बहुत अच्छा है! क्या आप कृपया हाथ में दिए गए सुझाव का जवाब दे सकते हैं? --नो-ओवरराइट एक बढ़िया अतिरिक्त होगा और यह स्क्रिप्ट के साथ कॉल को लपेटने से बच जाएगा

guyisra 21 अक्तू॰ 2018

इस मुद्दे पर +1। मैं मौजूदा Linux cp कमांड विकल्पों से मिलान करने के लिए -n, --no-clobber का प्रस्ताव करता हूं।

evanstucker-hates-2fa 5 दिस॰ 2018

👍9

क्या इस अनुरोध पर कोई अमल हुआ है? स्थानीय बैकअप> S3 करने के लिए विंडोज बैच फ़ाइलों के साथ काम करने की कोशिश करना, यह सबसे आसान तरीका है, एक साधारण नो-ओवरराइट या समान ध्वज।

CaptainPalapa 12 फ़र॰ 2019

👍1

इस सुविधा के बारे में कोई अपडेट?

Adiii717 26 फ़र॰ 2019

👍2

इस सुविधा के बारे में कोई अपडेट? धन्यवाद

julio75012 4 मार्च 2019

इस सुविधा के बारे में कोई अपडेट?

noelnamai 22 मार्च 2019

इस सुविधा के बारे में कोई अपडेट?

avanier 2 मई 2019

सेव3, +1

pgolebiowski 13 मई 2019

वास्तव में इस सुविधा को जोड़ने की आवश्यकता है क्योंकि S3 सिंक प्रत्येक फ़ाइल को अपलोड करने के लिए प्रतीत नहीं होता है।

southpaw5271 7 जून 2019

कोई अपडेट या वर्कअराउंड?

mehmetfazil 18 जून 2019

कोई अपडेट या वर्कअराउंड?

मुझे बाल्टी में सभी वस्तुओं को एक सरणी (सूची) में लोड करने के लिए एक पायथन लिपि लिखनी पड़ी, फिर उस निर्देशिका से सभी आइटम लोड करें जिसे मैं सिंक करना चाहता हूं, फिर सरणी की तुलना करें और स्थानीय आइटम अपलोड करें एस 3 सरणी में नहीं .

southpaw5271 18 जून 2019

👍3

मुझे बाल्टी में सभी वस्तुओं को एक सरणी (सूची) में लोड करने के लिए एक पायथन लिपि लिखनी पड़ी, फिर उस निर्देशिका से सभी आइटम लोड करें जिसे मैं सिंक करना चाहता हूं, फिर सरणी की तुलना करें और स्थानीय आइटम अपलोड करें एस 3 सरणी में नहीं .

@ Southpaw5271 - अपनी स्क्रिप्ट साझा करने और मुझे कुछ समय बचाने की परवाह है? ; )

kevb 4 जुल॰ 2019

मुझे बाल्टी में सभी वस्तुओं को एक सरणी (सूची) में लोड करने के लिए एक पायथन लिपि लिखनी पड़ी, फिर उस निर्देशिका से सभी आइटम लोड करें जिसे मैं सिंक करना चाहता हूं, फिर सरणी की तुलना करें और स्थानीय आइटम अपलोड करें एस 3 सरणी में नहीं .
@ Southpaw5271 - अपनी स्क्रिप्ट साझा करने और मुझे कुछ समय बचाने की परवाह है? ; )

मुझे अब यह नहीं लगता :( क्षमा करें!

southpaw5271 8 जुल॰ 2019

यह ध्वज cp कमांड के लिए भी मूल्यवान होगा, क्योंकि sync गंतव्य नाम बदलते समय किसी फ़ाइल को कॉपी करने की अनुमति नहीं देता है।

aws s3 cp --no-overwrite ./somefile s3://bucket/othername

mpdude 28 अग॰ 2019

हमें s3 से स्थानीय में --no-overwrite विकल्प की भी आवश्यकता है। हम अच्छी तरह से अर्थ वाले व्यक्तियों के आकस्मिक ओवरराइट द्वारा जला दिए गए हैं, और यह उनके लिए "रेलगाड़ी" लगाने का एक बहुत ही सराहनीय तरीका होगा। धन्यवाद!

RobElEmYew 7 नव॰ 2019

👍5

कोई भी जानकारी?

EralpB 13 जन॰ 2020

👍1

इस सुविधा के बारे में कोई अपडेट? शुक्रिया

cbachhuber 5 फ़र॰ 2020

👍1

danielwhatmuff 26 मार्च 2020

👎1

मैं पुराने सिस्टम से फाइल माइग्रेट कर रहा हूं। मेरे पास एक पायथन लिपि है जो डीबी कॉलम के अनुसार अलग-अलग पथ उत्पन्न करती है (यानी प्रत्येक संगठन का अब विशिष्ट बाल्टी पर अपना फ़ोल्डर होता है), इसलिए मैं सिंक कमांड पर भरोसा नहीं कर सकता। यदि -स्किप-डुप्लिकेट या किसी प्रकार का पैरामीटर उपलब्ध होगा तो मैं आंशिक माइग्रेशन करने के लिए एक स्क्रिप्ट चला सकता हूं।

dsovino-alma 5 अप्रैल 2020

plastic-abubakr 13 मई 2020

👎1

इसकी सख्त जरूरत है। यह पहले से ही क्यों नहीं है?

rjurney 19 मई 2020

oboiko-chegg 22 मई 2020

👎1

+10

curioustolearn 26 मई 2020

👎1

इस सुविधा के बारे में कोई अपडेट? शुक्रिया

jmvictoria 4 जून 2020

कृपया इस सुविधा के लिए वोट भी करें!

BobPusateri 11 जून 2020

madkinsz 25 जून 2020

👎1

7404020 9 जुल॰ 2020

👎1

Jongy 23 जुल॰ 2020

👎1

++1

yuriw 7 अग॰ 2020

👎1

इस पर कोई अपडेट?

ssbagalkar 11 अग॰ 2020

👍7

alexandredavi 8 अक्तू॰ 2020

मुझे विश्वास नहीं हो रहा है कि यह अभी भी कोई बात नहीं है। S3 पर एक अपरिवर्तनीय भंडारण बनाना असंभव के बगल में है :(

molszanski 9 अक्तू॰ 2020

हमने S3 बकेट से कॉपी किए गए डेटा को स्थानीय लाइनक्स माउंट में शुरू किया है और गंतव्य पर आकार S3 बकेट से ~ 40 GB कम है। केवल लापता को कॉपी करने के तरीके खोजें। ऐसा लगता है कि सभी को कॉपी करने के बजाय इसे करने का कोई आसान तरीका नहीं है।

sreekanthadari 15 अक्तू॰ 2020

aws s3 sync का एक विकल्प जो कुछ समान हासिल कर सकता है वह है --size-only बूलियन ध्वज, जो गंतव्य में तभी ओवरराइड होगा जब आकार स्रोत और गंतव्य वस्तु के बीच भिन्न हो,

 --size-only (boolean) Makes the size of each key the only criteria used
       to decide whether to sync from source to destination.

मैंने जिस कमांड का इस्तेमाल किया,

aws s3 sync s3://<source bucket> s3://<destination bucket> --size-only

_महत्वपूर्ण_: पहले --dry-run बूलियन ध्वज के साथ ऊपर कमांड चलाने का जोरदार सुझाव दें, यह देखने के लिए कि यह कमांड वास्तव में इसे चलाने से पहले क्या करने का इरादा रखता है, खासकर यदि इसमें आपके उत्पादन सिस्टम शामिल हैं। यह सावधानी की एक बहुतायत से बाहर है।

joquijada 16 अक्तू॰ 2020

👍1

मेरी मदद नहीं करता है, डीएच द्वारा संबोधित किए जाने के लिए #5456 की प्रतीक्षा कर रहा है

yuriw 16 अक्तू॰ 2020

क्या यह पृष्ठ उपयोगी था?

0 / 5 - 0 रेटिंग्स

Aws-cli: aws s3 cp/mv . में --no-overwrite विकल्प जोड़ें

सबसे उपयोगी टिप्पणी

सभी 43 टिप्पणियाँ

संबंधित मुद्दों