Pandas Dataframe 替换异常值

Question

预先感谢您的帮助！ （代码如下）（数据在这里）

我想删除 5 厘米到 225 厘米列的 5/6 标准偏差之外的异常值，并将它们替换为该日期（月/日）和深度的平均值。 最好的方法是什么？

import pandas as pd
import numpy as np
import matplotlib.pyplot as plt
import warnings
warnings.filterwarnings('ignore')
raw_data = pd.read_csv('all-deep-soil-temperatures.csv', index_col=1, parse_dates=True)
df_all_stations = raw_data.copy()
df_selected_station.fillna(method = 'ffill', inplace=True);
df_selected_station_D=df_selected_station.resample(rule='D').mean()
df_selected_station_D['Day'] = df_selected_station_D.index.dayofyear
mean=df_selected_station_D.groupby(by='Day').mean()
mean['Day']=mean.index
mean.head()

Answer 1

对于更通用的解决方案，假设您获得了一个带有a列a数据框df 。

from scipy import stats.
df[np.abs(stats.zscore(df['a'])) > 5]['a'] = df['a'].mean()