如何在Elasticsearch中索引Twitter數據？

Question

我已經使用流式API從Twitter上獲取了一些數據。 該文件具有與數據相對應的json行。 我想在elasticsearch中為該數據建立索引，以便可以輕松地對其進行搜索。

我使用以下命令進行索引

cat file.json | jq -c '.[] | {"index": {"_index": "bookmarks", "_type": "bookmark", "_id": .id}}, .' | curl -XPOST localhost:9200/_bulk --data-binary @-

但它導致以下錯誤。

jq: error (at <stdin>:127687): Cannot index string with string "id"

Answer 1

無需手動完成所有操作，您只需使用Logstash Twitter Input。

我寫了一篇關於它的博客文章 。