[英]How can I copy/move multiple objects from a S3 bucket within specified byte-ranges to another bucket?
嘿，我正在嘗試將多個對象（200,000+）從公共天氣預報存儲桶 ( NOAA GFS ) 復制到我的私有 S3 存儲桶。
每個預測文件都有自己的索引文件，其中包含不同變量的字節范圍。 在這 500 個變量中，只有 20 個對我有用。
我已經設法通過迭代每 object 並提取指定字節來使用 boto3 做到這一點。 但這個過程非常緩慢。 有什么可能的改進？
您可以使用upload_copy_part來實現它。 在這里查看詳細信息
CopySourceRange采用類似bytes=start-end的值
如何將所有對象從一個 Amazon S3 存儲桶復制到另一個存儲桶？
[英]How can I copy all objects from one Amazon S3 bucket to another bucket?
是否可以在不使用存儲桶策略的情況下將 s3 存儲桶內容從一個存儲桶復制到另一個帳戶 s3 存儲桶？
[英]is it possible to copy s3 bucket content from one bucket to another account s3 bucket without using bucket policy?
將 json 文件從一個 s3 存儲桶復制到另一個 s3 存儲桶時，無法識別 Json 文件？
[英]Json file is not recognising when copy json files from one s3 bucket to another s3 bucket?
AWS Lambda 嘗試將文件從 S3 存儲桶復制到另一個 S3 存儲桶時出現無效存儲桶名稱錯誤
[英]Invalid bucket name error when AWS Lambda tries to copy files from an S3 bucket to another S3 bucket
如何為 s3 存儲桶設置允許經過身份驗證的用戶列出存儲桶或從存儲桶中獲取任何文件的策略
[英]How can I set a policy for an s3 bucket that allows authenticated users to list the bucket or get any file from the bucket
將文件從一個帳戶中的 AWS S3 存儲桶復制到 terraform/python 中另一個帳戶中的存儲桶
[英]copy files from AWS S3 bucket in one account to bucket in another account in terraform/python
我可以將數據從多個 S3 存儲桶復制到單個 S3 存儲桶嗎？
[英]Can I replicate data from Multiple S3 buckets to a single S3 bucket?
如何在腳本 elixir 中將文件夾的所有文件從另一個文件夾移動到同一個 S3 存儲桶
[英]How to move all files of folder from another folder to same S3 bucket in script elixir
聲明:本站的技術帖子網頁，遵循CC BY-SA 4.0協議，如果您需要轉載，請注明本站網址或者原文地址。任何問題請咨詢:yoyou2525@163.com.
