如何为新文件抓取s3存储桶
[英]How to crawl a s3 bucket for new files
问题描述
如何抓取s3存储桶以确保是否有任何新文件或对象添加或删除了？
2 个解决方案
解决方案1
1 2014-11-13 20:48:49
现在，当发生更改时，您会收到一条消息。 这是刚刚宣布的（很久之前）：
http://aws.amazon.com/blogs/aws/s3-event-notification/
它的实现非常简单-是时候丢弃所有难看的cron作业和列表循环了。
解决方案2
0 已采纳 2014-03-23 07:02:46
通过使用Java AWS开发工具包，能够从Java连接到S3存储桶并能够对存储桶进行爬网。
进行爬网只不过是将对象列表中并比较和标识新对象。
可以在http://aws.amazon.com/sdk-for-java/找到示例
如何使用 AWS Java SDK for S3 查询 AWS S3 存储桶以匹配对象（文件）名称
[英]how to query AWS S3 bucket for matching objects(files) names using AWS Java SDK for S3
我们如何使用 Java SDK 从 S3 存储桶下载没有文件夹的多个文件
[英]How can we download multiple files without folder from S3 bucket using Java SDK
声明:本站的技术帖子网页，遵循CC BY-SA 4.0协议，如果您需要转载，请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.