如何使用Zend_Lucene和Zend_Paginator优化大量数据库记录的索引

Question

因此，我有一个在主机上使用Cron部署和运行的cron脚本，并为数据库表中的所有记录建立了索引-索引随后既用于站点的前端，也用于支持的操作。

操作后，索引约为3-4 MB。

问题在于它占用了大量资源（CPU：30+和大量内存），并降低了计算机的速度。 我的问题是有关如何优化以下所述的操作：

首先，有一个使用Zend Framework API构建的选择查询，然后将该查询传递给Paginator工厂，该工厂返回一个paginator，我正在使用该Paginator平衡当前被索引的项目数，而不是对过多的项目进行迭代。 该脚本使用foreach循环遍历分页器对象中的当前项目，直到到达末尾，然后在获取下一页的项目后从头开始。

我怀疑这种开销是由Zend_Lucene引起的，但是不知道如何改进。

Answer 1

请参阅我的回答， 我可以预测Zend Framework索引的大小吗？

我测试了Zend_Search_Lucene与Apache Lucene（Java版本）。 在我的测试中，Java产品索引150万份文档的速度比PHP产品快300倍。

使用Apache Solr（Apache Lucene的Tomcat容器）会使您更加快乐。 Solr包含一个名为DataImportHandler的工具，该工具直接从JDBC数据源中提取数据。

使用PECL Solr扩展与PHP的Solr进行通信。 如果您无法安装该PHP扩展，请使用Curl ，它应在PHP的默认安装中可用。