如何使用python将空文件夹上传到S3

Question

以下代码可以正常工作，除非存在一个子文件夹，该子文件夹中没有任何文件，则该子文件夹不会出现在S3中。 例如，如果/ home / temp / subfolder没有文件，则子文件夹不会在S3中显示。 如何更改代码，以便在S3中也上传空文件夹？ 我试图写某事。 （请参阅下面的注释），但不知道如何将put_object（）调用到空子文件夹。

#!/usr/bin/env python
import os
from boto3.session import Session

path = "/home/temp"
session = Session(aws_access_key_id='XXX', aws_secret_access_key='XXX')
s3 = session.resource('s3')

for subdir, dirs, files in os.walk(path):
    # note: if not files ......
    for file in files:
        full_path = os.path.join(subdir, file)
        with open(full_path, 'rb') as data:

s3.Bucket('my_bucket').put_object(Key=full_path[len(path)+1:],    
Body=data)

此外，我尝试调用此函数来检查子文件夹或文件是否存在。 它适用于文件，但不适用于子文件夹。 如何检查子文件夹是否存在？ （如果存在子文件夹，我将不会上传）

def check_exist(s3, bucket, key):
    try:
        s3.Object(bucket, key).load()
    except botocore.exceptions.ClientError as e:
        return False
    return True

顺便说一句，我从上面引用了上面的代码

使用boto3检查s3中存储桶中是否存在密钥

和

http://www.developerfiles.com/upload-files-to-s3-with-python-keeping-the-original-folder-structure/

感谢他们分享代码。

Answer 1

目录（文件夹，子文件夹等）在S3中不存在。

当您将此文件复制到空的S3存储桶/mydir/myfile.txt ，仅将文件myfile.txt复制到S3。 未创建目录mydir因为该字符串是文件名mydir/myfile.txt 。 实际文件名是完整路径，不存在或未创建任何子目录。

在存储桶中列出文件时，S3通过使用前缀来模拟目录。 如果指定mydir/ ，则将返回所有以mydir/开头的S3对象，包括mydir/anotherfolder/myotherfile.txt 。 S3支持定界符（例如/以便可以创建子目录的外观。

注意：S3对象的文件名开头没有/ 。

使用前缀和定界符分层列出密钥