如何配置Elasticsearch從Amazon SQS提取消息

Question

在當前情況下，我在Ubuntu 14.04機器上具有ElasticSearch，並且在隊列中包含一些“ .json”消息的亞馬遜SQS隊列。 我想通過ES從亞馬遜SQS中提取消息，以便它可以使用.json消息對其進行索引。

我應該尋找什么，應該如何進行？ 我正在尋找python boto代碼行中的某些內容。

注意：我對此不感興趣使用logstash

Answer 1

Amazon SQS提供了一個用於接收消息的API： http : //docs.aws.amazon.com/AWSSimpleQueueService/latest/SQSGettingStartedGuide/ReceiveMessage.html

ElasticSearch提供了一個用於對消息進行索引的API： https ://www.elastic.co/guide/en/elasticsearch/client/java-api/current/index-doc.html

我不確定ES是否可以自動從SQS接收消息，但是一個可行的解決方案是SQS和ES之間的簡單代理以接收和編制索引。