[英]Is it possible to stream AWS cloudwatch logs
我知道 stream CloudWatch 将数据记录到 Amazon Elasticsearch 服务是可能的。 它记录在这里，但是是否可以将日志数据 stream 到自定义 AWS Glue 作业或 EMR 作业？
CloudWatch Logs (CWL) 流式传输到 ElasticSearch (ES) 的方式是 AWS 为您创建lambda function 。 所以CWLs会先从ZF7B44CFFAFD5C52223D5498196C8A2E7BZ到lambda，然后lambda会上传日志事件到ES。
对于胶水，您不需要 lambda function，因为胶水可以从运动流中获取其流数据。 因此，您必须设置CWL 订阅 kinesis stream。 stream 将用作流式胶水作业中的源。
对于 EMR，您也可以只使用 stream 以与 Glue 相同的方式记录从 CWL 到 kinesis 的事件。 但要读取 EMR 中的 stream 数据，您可能必须使用EMR Input Connector for Kinesis 。
AWS Cloudwatch 将 Stream 记录到 Amazon Elasticsearch 服务
[英]AWS Cloudwatch Logs Stream to Amazon Elasticsearch Service
AWS CloudWatch 日志流为空，而 Docker 容器日志已满
[英]AWS CloudWatch log stream is empty while Docker container logs are full
声明:本站的技术帖子网页，遵循CC BY-SA 4.0协议，如果您需要转载，请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.
