C＃中的Lucene查询找不到标点符号的结果

Question

我有一个搜索栏，可在“说明”字段上执行lucene查询，但带有撇号时不会返回结果。 例如，我有一个描述为Herter's® EZ-Load 200lb Feeder - 99018 。 当我搜索“ Herter”时，会得到结果，但是如果搜索“ Herter's”或“ Herters”，则不会得到结果。 这是我的搜索代码：

var query = Request.QueryString["q"];
var search = HttpContext.Current.Server.UrlDecode(query);

var rewardProductLookup = new RewardCatalogDataHelper();
RewardProductSearchCriteria criteria = new RewardProductSearchCriteria()
{
    keywords = search,
    pageSize = 1000,
    sortDirection = "desc"
};

IEnumerable<SkinnyItem> foundProducts = rewardProductLookup.FindByKeywordQuery(criteria);

---

public IEnumerable<SkinnyItem> FindByKeywordQuery(RewardProductSearchCriteria query)
{
    var luceneIndexDataContext = new LuceneDataContext("rewardproducts", _dbName);
    string fieldToQuery = "rpdescription";
    bool sortDirection = query.sortDirection.ToLower().Equals("desc");

    MultiPhraseQuery multiPhraseQuery = new MultiPhraseQuery();
    var keywords = query.keywords.ToLower().Split(',');
    foreach (var keyword in keywords)
    {
        if (!String.IsNullOrEmpty(keyword))
        {
            var term = new Term(fieldToQuery, keyword);
            multiPhraseQuery.Add(term);
        }
    }

    var booleanQuery = new BooleanQuery();
    booleanQuery.Add(multiPhraseQuery, BooleanClause.Occur.MUST);

    return
        luceneIndexDataContext.BooleanQuerySearch(booleanQuery, fieldToQuery, sortDirection)
            .Where(i => i.Fields["eligibleforpurchase"] == "1");
}

Answer 1

这里的问题是分析。 您尚未指定在这种情况下使用的分析器，因此我假设它是StandardAnalyzer 。

经过分析，术语“ Herter's”将翻译为“ herter”。 但是，您的FindByKeywordQuery方法中没有应用分析器，因此查找“ herter”有效，但“ herter's”无效。

一种解决方案是使用QueryParser ，而不是手动构造MultiPhraseQuery 。 QueryParser将处理标记化，小写等。 就像是：

QueryParser parser = new QueryParser(VERSION, "text", new StandardAnalyzer(VERSION));
Query query = parser.Parse("\"" + query.keywords + "\"");

Answer 2

单引号是查询中文本字段的分隔符。

Select * FROM Product where Description = 'foo' 

您将需要对查询的任何单引号进行转义或加倍。 尝试循环。

foreach (var keyword in keywords)
{
    if (!String.IsNullOrEmpty(keyword))
    {
        var term = new Term(fieldToQuery, keyword);
        term = term.Replace("'", "''");
        multiPhraseQuery.Add(term);
    }
}

您还可以创建扩展方法

    [DebuggerStepThrough]
    public static string SanitizeSQL(this string value)
    {
        return value.Replace("'", "''").Replace("\\", "\\\\");
    }

在这种情况下，您可以在循环中执行此操作

foreach (var keyword in keywords)
{
    if (!String.IsNullOrEmpty(keyword))
    {
        var term = new Term(fieldToQuery, keyword.SanitizeSQL());
        multiPhraseQuery.Add(term);
    }
}

希望这可以帮助。