Pandas Dataframe 替換異常值

Question

預先感謝您的幫助！ （代碼如下）（數據在這里）

我想刪除 5 厘米到 225 厘米列的 5/6 標准偏差之外的異常值，並將它們替換為該日期（月/日）和深度的平均值。 最好的方法是什么？

import pandas as pd
import numpy as np
import matplotlib.pyplot as plt
import warnings
warnings.filterwarnings('ignore')
raw_data = pd.read_csv('all-deep-soil-temperatures.csv', index_col=1, parse_dates=True)
df_all_stations = raw_data.copy()
df_selected_station.fillna(method = 'ffill', inplace=True);
df_selected_station_D=df_selected_station.resample(rule='D').mean()
df_selected_station_D['Day'] = df_selected_station_D.index.dayofyear
mean=df_selected_station_D.groupby(by='Day').mean()
mean['Day']=mean.index
mean.head()

Answer 1

對於更通用的解決方案，假設您獲得了一個帶有a列a數據框df 。

from scipy import stats.
df[np.abs(stats.zscore(df['a'])) > 5]['a'] = df['a'].mean()