在不使用 nltk 的情況下刪除文本文件中的停用詞

Question

大家好，我想在不使用 nltk 的情況下刪除文本文件中的停用詞。 我有一個文本文件，其中包含用於停止的停用詞列表，我想使用上面提到的停用詞列表。 謝謝你

Answer 1

雖然很難理解確切的要求，但我會做以下事情：

with open("stopwords.txt") as f:
    stopwords = f.read().splitlines() # Contains "and" and "or" on different lines

text = "Foo and bar or foo"
tokens = text.split() # Split into list of words
for word in tokens: 
    if word.lower() in stopwords: # If word in stopwords remove it
        tokens.remove(word)
clean_text = " ".join(word for word in tokens) # Join words into a string
print(clean_text) # Outputs: "Foo bar foo"