使用Python DictReader从S3读取csv文件

Question

我正在寻找编写从S3读取csv文件，然后逐行浏览文件并使用每一行中的值的Python代码。 下面的示例来自realpython.org，我喜欢如何使用列标题名称（如row [“ department”]）在行中选择值。

我尝试将csv.DictReader（）与从S3存储桶中获取的csv文件一起使用，但是它返回invalid argument或TypeError: expected str, bytes or os.PathLike object, not StreamingBody当我with open(obj['Body'], mode='r') as csv_file:打开文件时TypeError: expected str, bytes or os.PathLike object, not StreamingBody with open(obj['Body'], mode='r') as csv_file:

以下代码是否可用于从S3存储桶读取的csv文件？

import csv

with open('employee_birthday.txt', mode='r') as csv_file:
    csv_reader = csv.DictReader(csv_file)
    line_count = 0
    for row in csv_reader:
        if line_count == 0:
            print(f'Column names are {", ".join(row)}')
            line_count += 1
        print(f'\t{row["name"]} works in the {row["department"]} department, and was born in {row["birthday month"]}.')
        line_count += 1
    print(f'Processed {line_count} lines.')

Answer 1

obj['Body']是一个StreamingBody对象，如错误消息所示。 由于它是一个类似于文件的对象，因此应将其传递给DictReader而不是将其作为文件的路径打开，但是由于它以字节为单位返回流并且DictReader需要文本流，因此可以将其包装在io.TextIOWrapper代替：

import io
csv_reader = csv.DictReader(io.TextIOWrapper(obj['Body']))