在C＃中搜索簡單關鍵字的ASCII文件的最快方法？

Question

現在，我在ASCII文件中搜索這樣的簡單關鍵字：

int SearchInFile (string file, string searchString)
{
    int num = 0;

    StreamReader reader = File.OpenText (file);
    string line = reader.ReadLine();

    while (line != null)
    {
        int count = CountSubstrings(line, searchString);
        if (count != 0)
        {
            num += count;
        }
        line = reader.ReadLine();
    }

    reader.Close();

    return num;
}

這是最快，最有效的內存方式嗎？ 返回計數是可選的，如果它將在搜索方式上產生巨大差異，但不是單獨的。

我用它像：

SearchInFile ( "C:\\text.txt", "cool" );

Answer 1

在非托管代碼中，性能方面最有效的方法是使用內存映射文件而不是在緩沖區中讀取文件。 我確信只有這樣才能獲得最佳結果，特別是如果您要掃描的文件可能是來自遠程存儲的文件（來自服務器的文件）。

我不確定相應的.NET 4.0 類的使用是否與您的情況完全相同。

Answer 2

只需使用StreamReader的ReadToEnd方法將文本文件加載到一個大字符串中，然后使用string.IndexOf（）：

string test = reader.ReadToEnd();

test.indexOf("keyword")

Answer 3

如果你真的想要更高的性能（處理大約數百MB或GB的文件），那么你應該按照大約1k的塊來讀取字符串，然后對它們進行搜索，而不是逐行搜索。 盡管必須處理一些邊界條件，但這應該更快。

話雖這么說，你應該應用像ANTS這樣的探查器，看看這是否真的是你的瓶頸。