每隔几分钟,最好的,轻量级的FPT / SCP文件到S3的方式是什么? 所以wget / curl可以工作。 另外一个自定义解决方案可以工作,也许Java用DB来维护状态。 任何想法都会有所帮助。
什么是使用FPT / SCP将文件拉到S3的最佳方法?
Whats the best way pull files to S3 using FPT/SCP?
===============>>#2 票数:1
您可以将S3存储桶作为本地分区安装,并使用位于服务器文件系统上的S3文件。 有许多 好的开源工具可用。
但是在我这边,我建议你看看我的项目: RioFS ,一个用于安装Amazon S3存储桶的用户空间文件系统。 项目的目标和与其他类似工具相比的主要优势是:简单,操作速度和无错误的代码。
目前该项目处于“beta”状态,但它已经在几个高负载的文件服务器上运行了相当长的一段时间( RioFS提供了对S3文件到ftp / sftp服务器的访问权限)。
我们正围绕我们的项目建立一个社区,并正在寻求更多人加入我们的项目,以讨论未来的计划并帮助进行测试。 从我们这边,我们提供快速错误修复,并将听取您添加新功能的请求。
快速操作方法:
您可以使用以下命令装入存储桶(假设您已安装RioFS并已导出AWSACCESSKEYID和AWSSECRETACCESSKEY环境变量):
riofs http://s3.amazonaws.com your_bucket_name /path/to/localfolder
(请参阅项目的描述并运行riofs --help
以获取命令行参数的帮助)
请注意,该项目仍处于开发阶段,可能仍有一些漏洞。 如果您发现某些内容无法正常工作:请在项目的GitHub页面上填写问题报告。
希望它有所帮助,我们期待着您加入我们的社区!