aws s3 sync로 버킷의 모든 내용을 다우로드 하고 있습니다. 그런데,…

aws s3 sync로 버킷의 모든 내용을 다우로드 하고 있습니다. 그런데, 몇 개 디렉토리를 빼먹네요 ?? cp(리커시브 옵션주고)도 마찬가지고요. 몇 번을 시도해도 마찬가지 입니다. 에러가 떨어지는 것도 아니고요.

이거 왜 이런지 아시는 분 있나요 ??

8 thoughts on “aws s3 sync로 버킷의 모든 내용을 다우로드 하고 있습니다. 그런데,…

  1. aws SDK에 s3 리스트를 가져오는데 1000개로 제한이 있는걸로 아는데 그 문제로 인한 문제이지 않을까요?
    아니면 권한의 문제일 수도 있을거 같은데..

  2. 혹시 어떤 종류의 에러 메세지를 받으셨는지 물어봐도 될까요? 저는 주로 업로드에서 문제가 생기고, ‘invalid XML received’라고 나옵니다. 50-300Gb의 파일을 몇개씩 s3로 옮기는 일을 해야하는데, 여러 방법으로 시도를 해도 랜덤하게 계속 에러가 나오네요.

답글 남기기

이메일은 공개되지 않습니다. 필수 입력창은 * 로 표시되어 있습니다.