Aws-cli: s3 동기화는 버킷 간에 권한을 유지하지 않습니다.

모든 파일에 동일한 권한이 있습니까? 지금은 sync 와 함께 --acl sync 명령을 실행하여 권한을 설정할 수 있기 때문입니다. 그러나 현재 다른 선택적 인수 없이 sync 명령을 실행하면 권한을 찾지 않고 개체가 전송될 때 원래 개체와 동일한 권한이 있는지 확인합니다. 우리는 그것을 처리하기 위해 추가적인 인수/기능을 추가해야 할 것입니다.

아니요 - 모든 파일에 동일한 권한이 있는 경우 --acl 플래그를 사용할 수 있습니다.

이 기능은 특히 권한이 서로 다른 수천 개의 파일이 있고 단순한 파일 복사본이 아닌 버킷 간에 진정한 동기화를 원할 때 동기화 메커니즘에 반드시 있어야 합니다.

파일별로 권한을 얻는 또 다른 방법을 알고 있습니까? 그래서 이것을 충분히 쉽게 스크립팅할 수 있습니까?

도움을 주셔서 감사합니다.

예, 각 개체에 대해 aws s3api get-object-acl 를 실행하면. 당신은 CL을 얻을 수 있습니다. 다음은 명령에 대한 문서입니다.
http://docs.aws.amazon.com/cli/latest/reference/s3api/get-object-acl.html

알겠습니다. 감사합니다. 하지만 이 기능은 동기화에서 여전히 크게 감사할 것입니다. 기본 설정이 아닌 경우 --preserve-s3-acl 플래그만 있으면 됩니다.

괜찮아요. 기능을 고려할 것입니다. 시행하지 않은 이유는 수술 자체에 비용이 많이 들 수 있기 때문이라고 생각합니다. s3 버킷의 객체를 확인하기 위해 ListObjects 호출하지만 각 객체에 대한 acl을 반환하지는 않습니다. 차례로 돌아가서 나열된 모든 개체에 대해 GetObjectAcl 를 실행해야 하며 버킷에 수천 개의 항목이 있는 경우 시간이 걸릴 수 있습니다.

권한이 동기화되지 않았음을 발견하는 데 시간이 좀 걸렸기 때문에 권한이 동기화되지 않은 데이터만 나중에 다른 사람의 시간을 절약할 수 있다는 점을 언급하기 위해 s3에서 s3 sync로의 문서를 업데이트할 수 있습니다.

다시 한번 감사합니다

이것에 대한 어떤 업데이트?

몇 주 전에 이 문제를 해결하기 위해 풀 리퀘스트(#1535)를 추가했습니다( copy 와 같은 다른 S3-to-S3 전송). 포함될 가능성이 있습니까?

안녕하세요, 오래된 스레드라는 것을 알고 있지만 권한 유형별로 하나의 동기화를 통해 이것을 해결했습니다. 결론: --exclude 및 --include를 사용하여 키 이름으로 동기화를 필터링할 수 있으며 각 동기화의 ACL을 지정할 수도 있습니다... 따라서 다른 권한을 설정해야 하는 키 패턴이 있는 경우 다음을 실행하십시오. 다른 ACL 옵션과 함께 여러 번 sync 명령을 실행해야 합니다. 이상적이지는 않지만 작동합니다!

AWS 팀의 의견이 있으십니까?

백업용으로 git 리포지토리를 S3로 푸시하고 있습니다. 그런 다음 다시 동기화하면 모든 종류의 권한이 변경되었습니다.

내 모든 실행 가능한 bin 파일은 더 이상 실행 가능하지 않으며 git status는 이에 대해 비명을 지릅니다.

+1

+1

+1

+1

+1

+1

+1

+1

+1

+1

+1, 예, 마침표가 있는 버킷 이름이 있었고 클라우드 프런트를 통해 https와 호환되도록 변경해야 했습니다. 올바르게 명명된 새 버킷에 동기화되었습니다. 파일에 액세스할 수 없습니다. 권한에 대해 읽어보세요. 개체 수준 권한이 있습니다. 버킷의 모든 객체 수준 권한을 변경하는 명령이 없습니다. 진행 방법이 궁금합니다. aws GUI를 통한 권한은 두 버킷에서 실제로 동일하게 보이지만 cli를 통해 액세스 제어 목록을 조회할 때 원본 버킷에 복사되지 않은 추가 피부여자가 있음을 알 수 있습니다.
{
"수여자": {
"유형": "그룹",
"URI": " http://acs.amazonaws.com/groups/global/AllUsers "
},
"권한": "읽기"
}

안녕하세요!

AWS CLI와 관련된 기능 요청을 위해 UserVoice 로 마이그레이션하는 과정에서 GitHub에서 이 문제를 종료합니다.

이렇게 하면 버그 보고서로 대화를 희석하지 않고도 가장 관심 있는 기능을 더 쉽게 검색하고 지원을 표시할 수 있으므로 가장 중요한 기능을 얻을 수 있습니다.

빠른 UserVoice 입문서(아직 익숙하지 않은 경우): 아이디어가 게시된 후 사람들은 아이디어에 투표할 수 있으며 제품 팀은 가장 인기 있는 제안에 직접 응답합니다.

GitHub에서 기존 기능 요청을 가져왔습니다. 여기에서 이 문제를 검색하세요!

그리고 걱정하지 마십시오. 이 문제는 후손을 위해 GitHub에 계속 존재합니다. 원본 게시물을 UserVoice로 텍스트 전용으로 가져오기 때문에 GitHub 문제에 대해 이미 존재하는 의견과 토론을 계속 염두에 둘 것입니다.

GitHub는 버그 보고를 위한 채널로 남을 것입니다.

다시 한 번, 이 문제는 이제 https://aws.uservoice.com/forums/598381-aws-command-line-interface 에서 제목을 검색하여 찾을 수 있습니다.

-AWS SDK 및 도구 팀

이 항목은 특히 UserVoice( https://aws.uservoice.com/forums/598381-aws-command-line-interface/suggestions/33168325-s3-sync-does-not-preserve-permissions-across-) 에서 찾을 수 있습니다.

@ASayre - 이 토론을 하기에 잘못된 장소일 수 있지만 Amazon이 GitHub와 UserVoice에서 AWS CLI에 대한 토론을 어색하게 분할한 이유를 자세히 설명해 주시겠습니까?

기능 요청은 여기 GitHub에서 적절해 보입니다. 기능 요청으로만 필터링하고 가장 인기 있는 것으로 정렬하는 것은 비교적 쉽습니다.

GitHub를 사용하면 코드 조각을 쉽게 공유하거나 다른 문제(예: #1060, 이와 관련된 문제)를 참조할 수 있으며, AWS CLI 사용자 기반의 상당 부분이 이미 여기 GitHub에서 활성화되어 있습니다.

커뮤니티 피드백을 기반으로 GitHub 문제에 기능 요청을 반환하기로 결정했습니다.

누구든지이 작업을 수행하기 위해 적절한 솔루션을 생각해 냈습니까? 많이 필요한 기능.

위의 답변은 *를 공개적으로 읽도록 강제합니다. 권한이 유지되지 않습니다.

진행 상황은 어떻습니까? 나는 또한이 문제가 발생합니다. 이제 sync --include/exclude를 사용하여 이 문제를 해결합니다.

이 일을 하는 데 돈을 주고 싶은 사람이 있습니까?

4년이 지났지만 이 악몽은 계속되고 있다. 천만 개 이상의 파일이 있으며 복사하는 동안 권한이 모두 손실되었습니다. 권한을 유지하는 것과 같은 간단한 일이 어떻게 가능합니까?

+1

여기에 오는 다른 사람을 위해 저는 이것을 사용하여 한 버킷을 다른 버킷으로 복사하고 ACL을 유지할 수 있었습니다. https://github.com/cobbzilla/s3s3mirror/tree/2.1-stable

또한 훨씬 더 빠릅니다.

저를 위해 현재 작업 폴더를 백업하기 위해 s3를 사용하고 있습니다. 여기에는 git repo가 ​​포함되며 모든 권한 변경 후에도 내 repo가 ​​계속 놀라고 있습니다.

나에게 해결책은 리포지토리당 권한만 재설정하는 방법을 찾는 것이었습니다. AWS가 쓰레기를 고칠 때까지 이것이 나를 위한 솔루션입니다.

git config --global --add alias.permission-reset '!git diff -p -R --no-color | grep -E "^(diff|(old|new) mode)" --color=never | git apply'

여기에서 해결책을 찾았습니다.

https://stackoverflow.com/questions/2517339/how-to-recover-the-file-permissions-to-what-git-thinks-the-file-should-be

안녕하세요,

동일한 문제가 발생했습니다. 수많은 개체가 포함된 버킷이 있고 그 중 일부는 공개적으로 액세스할 수 있어야 합니다. ACL을 보존하면서 전체 버킷을 다른 버킷에 복사해야 했으며 물론 ACL을 수동으로 설정하려면 엄청난 시간이 걸립니다.

한 버킷에서 다른 버킷으로 객체를 복사하고 이에 대한 ACL도 설정하는 이 간단한 스크립트를 파이썬으로 만들었습니다.

자유롭게 살펴보세요:
https://github.com/terminator9999/aws-s3-bucket-copy/