[英]Solr NativeFSLock timeouts
設置:我在CentOS 5.7 linux 2.6.32-042stab044.5的Jetty容器中運行Apache Solr。 該服務器是一個帶有4GB專用RAM和2GB“突發”RAM的VPS。
我正在使用以下選項運行Solr(可讀性的換行符):
/opt/jre/bin/java -Dsolr.solr.home=/opt/solr/solr
-Xms2048m -Xmx2048m
-Djetty.logs=/var/log/solr
-Djetty.home=/opt/solr
-Djava.io.tmpdir=/tmp
-jar /opt/solr/start.jar
/opt/solr/etc/jetty-logging.xml
/opt/solr/etc/jetty.xml
我的Solr配置使用~500個核心,每個核心使用13MB,總磁盤容量為6.8GB。
問題: solr服務器大約每兩周開始緩慢響應。 當我檢查stderror日志時,我看到很多這樣的條目:
Jun 21, 2012 9:36:11 AM org.apache.solr.common.SolrException log
SEVERE: org.apache.lucene.store.LockObtainFailedException: Lock obtain timed out: NativeFSLock@/opt/solr/solr/examplestore/data/index/write.lock
at org.apache.lucene.store.Lock.obtain(Lock.java:84)
at org.apache.lucene.index.IndexWriter.<init>(IndexWriter.java:1108)
at org.apache.solr.update.SolrIndexWriter.<init>(SolrIndexWriter.java:83)
at org.apache.solr.update.UpdateHandler.createMainIndexWriter(UpdateHandler.java:101)
at org.apache.solr.update.DirectUpdateHandler2.openWriter(DirectUpdateHandler2.java:171)
at org.apache.solr.update.DirectUpdateHandler2.addDoc(DirectUpdateHandler2.java:219)
at org.apache.solr.update.processor.RunUpdateProcessor.processAdd(RunUpdateProcessorFactory.java:61)
at org.apache.solr.update.processor.LogUpdateProcessor.processAdd(LogUpdateProcessorFactory.java:115)
at org.apache.solr.handler.XMLLoader.processUpdate(XMLLoader.java:158)
at org.apache.solr.handler.XMLLoader.load(XMLLoader.java:79)
at org.apache.solr.handler.ContentStreamHandlerBase.handleRequestBody(ContentStreamHandlerBase.java:58)
at org.apache.solr.handler.RequestHandlerBase.handleRequest(RequestHandlerBase.java:129)
at org.apache.solr.core.SolrCore.execute(SolrCore.java:1372)
at org.apache.solr.servlet.SolrDispatchFilter.execute(SolrDispatchFilter.java:356)
at org.apache.solr.servlet.SolrDispatchFilter.doFilter(SolrDispatchFilter.java:252)
at org.mortbay.jetty.servlet.ServletHandler$CachedChain.doFilter(ServletHandler.java:1212)
at org.mortbay.jetty.servlet.ServletHandler.handle(ServletHandler.java:399)
at org.mortbay.jetty.security.SecurityHandler.handle(SecurityHandler.java:216)
at org.mortbay.jetty.servlet.SessionHandler.handle(SessionHandler.java:182)
at org.mortbay.jetty.handler.ContextHandler.handle(ContextHandler.java:766)
at org.mortbay.jetty.webapp.WebAppContext.handle(WebAppContext.java:450)
at org.mortbay.jetty.handler.ContextHandlerCollection.handle(ContextHandlerCollection.java:230)
at org.mortbay.jetty.handler.HandlerCollection.handle(HandlerCollection.java:114)
at org.mortbay.jetty.handler.HandlerWrapper.handle(HandlerWrapper.java:152)
at org.mortbay.jetty.Server.handle(Server.java:326)
at org.mortbay.jetty.HttpConnection.handleRequest(HttpConnection.java:542)
at org.mortbay.jetty.HttpConnection$RequestHandler.content(HttpConnection.java:945)
at org.mortbay.jetty.HttpParser.parseNext(HttpParser.java:756)
at org.mortbay.jetty.HttpParser.parseAvailable(HttpParser.java:212)
at org.mortbay.jetty.HttpConnection.handle(HttpConnection.java:404)
at org.mortbay.jetty.bio.SocketConnector$Connection.run(SocketConnector.java:228)
at org.mortbay.thread.QueuedThreadPool$PoolThread.run(QueuedThreadPool.java:582)
當我檢查內存使用情況時,jetty進程使用3GB, free -m
報告正在使用~3GB。
我目前的解決方法是重啟jetty進程(/etc/init.d/solr restart)。 “鎖定獲得超時”例外停止並且表現在另一周或兩周內是合理的。
SolrPerformance wiki表明這是一個內存問題,這就是為什么我將內存使用量設置為2GB並在終止進程之前檢查內存使用情況。 但是,我不確定這是不是問題,因為有備用內存(3GB使用4GB專用,加上2GB“爆發”RAM)。
問題:我可以做些什么來防止“鎖定獲取超時”異常並最終提高我的Solr設置的穩定性,所以我不必每兩周重新啟動一次?
不知道你的應用程序,我不應該評論太多......但是500核心對於索引大小和處理器核心數量似乎很高(我懷疑,不超過4)。
您可以重新加載solr內核,根據我的經驗,可以幫助從某些長壽命對象中回收內存。 http://wiki.apache.org/solr/CoreAdmin#RELOAD
您是否真的注意到日志中的內存不足錯誤? 您可以從啟用verbosegc開始,並將您注意到的錯誤與詳細的gc輸出相關聯。
聲明:本站的技術帖子網頁,遵循CC BY-SA 4.0協議,如果您需要轉載,請注明本站網址或者原文地址。任何問題請咨詢:yoyou2525@163.com.