簡體 English 中英

我開始使用Storm Crawler web 進行爬取，但我不知道爬取結果go 到哪里去了？我沒有使用 Solr 或 Elastic Search

[英]I started web crawling using Storm Crawler but I do not know where crawled results go to? Im not using Solr or Elastic Search

原文 2023-01-18 08:32:24 0 1 indexing/ stormcrawler

Storm Crawler 開始抓取數據，但我似乎找不到數據的存儲位置我需要將這些數據保存到數據庫中，以便我可以將數據連接到遠程服務器並為其編制索引。 Storm爬蟲好像主要關注Solr和Elastic的集成，。！ 我只想將其數據存儲到數據庫中，這樣我就可以使用任何站點搜索解決方案，如 Typesense、flex search 和任何其他站點搜索軟件。

我對 web 很陌生，所以我只是安裝了運行所需的軟件。

1 個解決方案

SC 不關注 SOLR 或 ES。 例如有一個SQL 模塊。 至於“爬到哪里去了”，要看你的拓撲是干什么的。 也許嘗試解釋什么螺栓正在運行等......

如何在彈性搜索中索引分層數據？

[英]How do I index hierarchical data in elastic search?

如何在Solr中處理多個單詞關鍵字和精確搜索？

[英]How do I deal with multiple word keyphrases and exact search in Solr?

我怎么知道我的PostgreSQL服務器是否使用“C”語言環境？

[英]How do I know if my PostgreSQL server is using the “C” locale?

帶*的Solr結果為空，沒有*的結果

[英]Solr results with * are empty, without * I have results

如何使用部分字符串搜索數組，並返回索引？

[英]How do I search an array using a partial string, and return the index?

Solr使用索引字段進行半徑的空間搜索？

[英]Solr spatial search using an indexed field for radius?

無法使用 API 在彈性搜索中創建索引

[英]Unable to create index in Elastic search using API

如何使用splunk web創建索引？

[英]How do I create an index using splunk web?

索引magento 4.1.1.1后為什么沒有搜索結果？

[英]Why do i have no search results after indexing magento 4.1.1.1?

Solr在新字段上沒有搜索結果

[英]Solr no search results on new field

暫無

暫無

聲明:本站的技術帖子網頁，遵循CC BY-SA 4.0協議，如果您需要轉載，請注明本站網址或者原文地址。任何問題請咨詢:yoyou2525@163.com.

相關問題 如何在彈性搜索中索引分層數據？如何在Solr中處理多個單詞關鍵字和精確搜索？我怎么知道我的PostgreSQL服務器是否使用“C”語言環境？帶*的Solr結果為空，沒有*的結果如何使用部分字符串搜索數組，並返回索引？ Solr使用索引字段進行半徑的空間搜索？無法使用 API 在彈性搜索中創建索引如何使用splunk web創建索引？索引magento 4.1.1.1后為什么沒有搜索結果？ Solr在新字段上沒有搜索結果

相關標簽

粵ICP備18138465號 © 2020-2024 STACKOOM.COM