使用 modin.pandas 應用更快的熊貓

Question

嘗試使用 modin.pandas 將所有內核用於此應用功能

from nltk.sentiment.vader import SentimentIntensityAnalyzer
sid = SentimentIntensityAnalyzer()
# sentiment Score of essay
data = data.merge(data.essay.apply(lambda s: pd.Series({'neg':sid.polarity_scores(s)['neg'], 
                                                 'neu':sid.polarity_scores(s)['neu'],
                                                 'pos':sid.polarity_scores(s)['pos'],
                                                 'compound':sid.polarity_scores(s)['compound']})), 
           left_index=True, right_index=True)

它適用於默認的熊貓，但使用 modin 會引發此錯誤：

ValueError: can not merge DataFrame with instance of type <class 'modin.pandas.series.Series'>

Essay 是 DataFrame 中名為“data”的文本列

Answer 1

正如這個問題的答案所暗示的那樣，您可能會收到此錯誤，因為您正在將pandas.Dataframe與modin.Series合並。 對於您的示例，嘗試使用modin.pandas.DataFrame(data)將data轉換為modin.pandas.DataFrame(data)幀。