如何使用pycharm應用TFIDF在CSV文件中查找重要單詞

Question

我有一個包含一些數據的文件，

我有一個數據示例

+------------+---------------------------------+-------------------------+
|  SOC Code  |              Title              |  Occupational Category  |
+------------+---------------------------------+-------------------------+
| 11-1011.03 | Chief Sustainability Officers   | New & Emerging          |
| 11-1021.00 | General and Operations Managers | Enhanced Skills         |
+------------+---------------------------------+-------------------------+

我需要在文件中找到最常用的單詞。有關如何應用的任何想法？ 代碼片段將作為示例

Answer 1

您可以使用NLTK FreqDist方法對單詞計數，然后返回最常用的單詞。