將數據直接抓取到 Cassandra 數據庫

Question

任何人都可以幫助我使用 Cassandra 數據庫嗎？ 實際上，我想將抓取的數據直接傳遞給 Cassandra。 目前，我正在使用scrapy來解析來自不同網站的數據。

提前致謝。

西奇

Answer 1

在 Scrapy 中，一旦您抓取了數據，您就可以通過項目管道運行它來存儲它。

文檔很容易理解： http : //doc.scrapy.org/en/latest/topics/item-pipeline.html

只需在您的自定義項目管道中使用 Cassandra 的 python 驅動程序來存儲結果。

---

編輯：用工作鏈接更新了死鏈接。