朴素贝叶斯的文本分类

Question

我倾向于NLP并注意到基于朴素贝叶斯的TextBlob分类（textblob是在NLTK之上构建的） https://textblob.readthedocs.io/en/dev/classifiers.html在训练数据为句子列表并且确实可以正常工作时如果训练数据是单个单词（每个单词和指定的分类），则根本不起作用。

为什么？

Answer 1

因为您在训练数据中没有单词。

通常，应该选择具有相同分布的训练和评估/测试数据。 偏差或偏斜通常是有问题的。 在极少数情况下，您可以训练模型去做一件事情，然后用它去做其他事情。

在您的情况下，模型可能会将权重分布在句子中的单词上。 因此，当您选择一个单词时，您只会得到一小部分表示的权重。

为了使它起作用，您应该在训练数据中添加单个单词示例。