![](/img/trans.png)
[英]How to batch the iot data in aws sqs and then store data in aws s3
[英]How to code/implement AWS Batch?
我对 AWS Batch 还很陌生。 我以前有批量实施的经验。 我浏览了此链接并了解了如何在 AWS 上配置批处理。
我必须实现简单的批处理,它将读取传入的管道分隔文件,从该文件中读出数据,对该数据执行一些转换,然后将每一行保存为 S3 中的单独文件。
但是我没有找到任何可以看到实现部分的文档或示例。 所有或至少大多数文档仅讨论 AWS 批处理配置。
编码/实施部分有什么想法吗? 我会使用 Java 来实现。
这可能对你有帮助。 虽然代码是在 python 中!
AWSLABS/AWS-BATCH-基因组学
AWS Batch 将您的 Docker 容器作为作业运行,因此实施不限于语言。
对于 Java,您可以将一些 jars 复制到您的Dockerfile
,并提供一个入口点或CMD
以在 AWS Batch 中启动作业时启动您的代码。
声明:本站的技术帖子网页,遵循CC BY-SA 4.0协议,如果您需要转载,请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.