[英]Pandas dataframe filter vectorized
我有一個像這樣的DataFrame:
a = date | user | value
-------------------------
2017-05-01 | AAA | 1
2017-05-02 | AAA | 2
... | AAA | ...
2017-08-31 | AAA | 1.7
2017-05-01 | BBB | 1.5
2017-05-02 | BBB | 3
... | BBB | ...
2017-08-31 | BBB | 2.7
另外,我有一個像這樣的列表:
b = start_date | user
-----------------
2017-05-02 | AAA
2017-05-05 | AAA
2017-05-03 | BBB
我現在想從a中提取一個3維矩陣,該矩陣包含b中給用戶的b中給定的start_date開始的3個下一個日期的列表。 因此,在上面的示例中,以下內容:
[
[[2017-05-02, AAA, 2], [2017-05-03, AAA, x], [2017-05-04, AAA, x]],
[[2017-05-05, AAA, 2], [2017-05-06, AAA, x], [2017-05-07, AAA, x]],
[[2017-05-03, BBB, 2], [2017-05-04, BBB, x], [2017-05-05, BBB, x]],
]
x代表一個隨機值,我懶得將所有示例都記下來。
我正在使用Python 3.5。 非常感謝。 我期待着您的明智回答:-)
嘗試這個..另外,請查看有關“如何制作良好的可復制熊貓示例”的鏈接 。
DF=pd.merge(df1,df2,on='user',how='outer')
DF['DIFF']=DF['date_x']-DF['date_y']
DF=DF.loc[(DF.DIFF/np.timedelta64(1, 'D')>=0)&(DF.DIFF/np.timedelta64(1, 'D')<=2),:]
DF.drop('DIFF',1).groupby([DF.index.get_level_values(0),'date_y'])['date_x','user','value'].\
apply(lambda x :x.values.tolist()).values.tolist()
Out[760]:
[[[Timestamp('2017-05-02 00:00:00'), 'AAA ', 2.0],
[Timestamp('2017-05-03 00:00:00'), 'AAA ', 2.0],
[Timestamp('2017-05-04 00:00:00'), 'AAA ', 2.0]],
[[Timestamp('2017-05-05 00:00:00'), 'AAA ', 2.0],
[Timestamp('2017-05-06 00:00:00'), 'AAA ', 2.0],
[Timestamp('2017-05-07 00:00:00'), 'AAA ', 1.7]],
[[Timestamp('2017-05-03 00:00:00'), 'BBB ', 3.0],
[Timestamp('2017-05-04 00:00:00'), 'BBB ', 3.0],
[Timestamp('2017-05-05 00:00:00'), 'BBB ', 3.0]]]
數據輸入
df1
Out[748]:
date user value
0 2017-05-01 AAA 1.0
1 2017-05-02 AAA 2.0
2 2017-05-03 AAA 2.0
3 2017-05-04 AAA 2.0
4 2017-05-05 AAA 2.0
5 2017-05-06 AAA 2.0
6 2017-05-07 AAA 1.7
7 2017-05-01 BBB 1.5
8 2017-05-02 BBB 3.0
9 2017-05-03 BBB 3.0
10 2017-05-04 BBB 3.0
11 2017-05-05 BBB 3.0
df2
Out[749]:
date user
0 2017-05-02 AAA
1 2017-05-05 AAA
2 2017-05-03 BBB
聲明:本站的技術帖子網頁,遵循CC BY-SA 4.0協議,如果您需要轉載,請注明本站網址或者原文地址。任何問題請咨詢:yoyou2525@163.com.