实时将Json文件存储到Amazon S3的Python脚本

Question

我有一个Python代码，可以使用Twitter Streaming API实时给我发推文。 我将输出存储到一个json文件中，该文件会随着新推文的到来而不断更新，但是我想将此json保存到amazon s3中 ，我可以使用它使用amazon lambda服务来触发事件。解决这个问题？

Answer 1

亚马逊有一个python库与其Web服务进行交互。 它称为Boto同时支持S3和lambda服务。

要将json保存到S3：

import boto3

s3 = boto3.resource('s3')
s3.create_bucket(Bucket='jsonbucket')
s3.Object('jsonbucket', 'yourstoredjson.json').put(Body=open('yourlocaljson.json', 'rb'))

注意：使用boto将文件保存到S3之前，您必须为AWS 设置身份验证凭证 。