[英]how to download a file from s3 bucket with a temporary token in python
[英]Python: how to download a file from an S3 bucket
我有一些数据存储在AWS
S3
存储桶中。
如果从终端我做:
aws s3 ls s3://myBucket/folder/ --profile myProfile
2020-04-23 01:04:09 96858539 2020-01-01-file.csv.gz
如果我尝试使用boto3
下载文件
import boto3
session = boto3.session.Session(profile_name='myProfile')
s3 = boto3.resource('s3')
f1 = '2020-01-01-file.csv.gz'
s3.meta.client.download_file('myBucket', 'folder/%s'%f1, f1)
我收到以下错误
ClientError: An error occurred (403) when calling the HeadObject operation: Forbidden
它对您不起作用的原因是您创建了 boto3 session
session = boto3.session.Session(profile_name='myProfile')
而你不使用它。 所以代替boto3.resource('s3')
,应该尝试session.resource('s3')
但无论如何,boto3 文档都有一个名为Downloading Files的完整部分。 它显示了两个带有解释的示例:
import boto3
s3 = boto3.client('s3')
s3.download_file('BUCKET_NAME', 'OBJECT_NAME', 'FILE_NAME')
或者
s3 = boto3.client('s3')
with open('FILE_NAME', 'wb') as f:
s3.download_fileobj('BUCKET_NAME', 'OBJECT_NAME', f)
声明:本站的技术帖子网页,遵循CC BY-SA 4.0协议,如果您需要转载,请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.