如何調整OOV字的FastText參數？

Question

我已經聽說 FastText 正在使用其 n-gram 生成 OOV 詞向量。 它已經自動內置在 FastText 架構中，還是我們想調整特定參數？ 就像 Keras 標記器中的 oov_tokens。 我已經在尋找要在 Fast Text 中調整的參數，但找不到任何參數。

如果有人知道並想分享他們的知識，我將非常感激。

謝謝你。

Answer 1

OOV 詞的矢量生成已集成到 fastText 中（至少在 Facebook 的原始實現中）。

為了生成這些向量，fastText 使用子詞 n-grams 。 要了解更多信息，您可以閱讀此主題和此視覺指南。

因此，對 OOV 詞向量創建影響最大的參數如下：

• minn (char ngram 的最小長度)
• maxn （字符 ngram 的最大長度）

有關 fastText 選項/參數的更多信息，請參閱官方文檔。