簡體   English   中英

是否可以 stream AWS cloudwatch 日志

[英]Is it possible to stream AWS cloudwatch logs

我知道 stream CloudWatch 將數據記錄到 Amazon Elasticsearch 服務是可能的。 它記錄在這里,但是是否可以將日志數據 stream 到自定義 AWS Glue 作業或 EMR 作業?

CloudWatch Logs (CWL) 流式傳輸到 ElasticSearch (ES) 的方式是 AWS 為您創建lambda function 所以CWLs會先從ZF7B44CFFAFD5C52223D5498196C8A2E7BZ到lambda,然后lambda會上傳日志事件到ES。

對於膠水,您不需要 lambda function,因為膠水可以從運動流中獲取其流數據。 因此,您必須設置CWL 訂閱 kinesis stream。 stream 將用作流式膠水作業中的源。

對於 EMR,您也可以只使用 stream 以與 Glue 相同的方式記錄從 CWL 到 kinesis 的事件。 但要讀取 EMR 中的 stream 數據,您可能必須使用EMR Input Connector for Kinesis

暫無
暫無

聲明:本站的技術帖子網頁,遵循CC BY-SA 4.0協議,如果您需要轉載,請注明本站網址或者原文地址。任何問題請咨詢:yoyou2525@163.com.

 
粵ICP備18138465號  © 2020-2024 STACKOOM.COM