繁体   English   中英

Solr提交并优化问题

[英]Solr commit and optimize questions

我有一个分类广告网站。 用户可以放置广告,修改广告,查看广告等。

每当用户放置广告时,我都会向Solr添加文档。 但是,我不知道何时提交。 提交会使我阅读的内容变慢。

我该怎么办? 每12个小时左右自动提交一次?

另外,我应该如何进行优化?

有关提交/优化的更多详细信息:

提交:在为文档编制索引以进行solr时,您所做的任何更改都不会显示,直到您运行commit命令为止。 因此,何时运行commit命令实际上取决于您希望更改通过搜索引擎显示在网站上的速度。 但是,这是一项繁重的操作,因此不应该在每次更新后分批进行。

优化:这类似于硬盘驱动器上的碎片整理命令。 它将把索引重新组织成段(提高搜索速度),并删除所有删除(替换)的文档。 Solr是只读数据存储,因此每次索引文档时,它都会将旧文档标记为已删除,然后创建一个全新的文档来替换已删除的文档。 优化将删除这些已删除的文档。 您可以转到Solr Statistics页面并查看numDocs vs. maxDocs编号,以查看搜索文档与已删除文档的数量。 这两个数字之间的差异是索引中已删除(无法搜索)的文档数量。

此外,Optimize从旧索引建立一个完整的NEW索引,然后在完成时切换到新索引。 因此,该命令需要两倍的空间来执行操作。 因此,您需要确保索引的大小不超过可用硬盘空间的%50。 (这是一条经验法则,由于删除了文档,通常需要少于%50的费用)

索引服务器/搜索服务器:Paul Brown的正确做法是,solr的最佳设计是将服务器专用并调整为索引,然后将更改复制到搜索服务器。 您可以调整索引服务器以使其具有多个索引端点。

eg: http://solrindex01/index1; http://solrindex01/index2

而且由于索引服务器不搜索内容,因此可以使用不同的内存占用量和索引预热命令等对其进行设置。

希望这对大家有用。

实际上,频繁提交和优化会使事情变慢。 太重了

经过一天的搜索和阅读,我发现了这一点:

1-优化会使索引在优化的同时大小增加一倍,并使事情真的变慢。

2-在每次添加之后进行提交不是一个好主意,最好每天进行两次,然后最多每天仅进行一次优化。

3-在solrconfig.xml文件中应将Commit设置为“ autoCommit”,并应根据您的需要对其进行调整。

通常执行这种操作的方式是在用户请求路径之外的Solr节点上执行提交/优化操作。 这需要额外的硬件,但是可以确保索引操作的性能损失不会影响用户。 复制用于定期将优化的索引文件从主节点穿梭到对用户执行搜索查询的节点上。

请先尝试。 如果您仅避免阅读简单优雅的解决方案可能会导致性能问题,那将是非常糟糕的。 换句话说,请避免过早优化

暂无
暂无

声明:本站的技术帖子网页,遵循CC BY-SA 4.0协议,如果您需要转载,请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.

 
粤ICP备18138465号  © 2020-2024 STACKOOM.COM