[英]Pivot by group and merge in Pandas dataframe
我有兩個數據框company_df
和car_df
。 一家公司可以擁有多輛汽車,而一輛汽車只能擁有一家公司。
公司_DF
Company_ID Company_Name
0 1 Ford
1 2 Holden
2 3 Kia
汽車_DF
Company_ID Car_ID Car_Name
0 1 1 Falcon
1 1 2 Focus
2 2 1 Commodore
3 3 1 Sorento
4 3 2 Rio
5 3 2 Sportage
Rio 和 Sportage 故意具有相同的 Car_ID,大約 1% 的行有這個問題,這不是我可以在我的數據源中更改的東西。
我想pivot每組車,按公司,讓車都在一條線上。 例如。
Company_ID Company_Name Car_ID_1 Car_Name_1 Car_ID_2 Car_Name_2 Car_ID_3 Car_Name_3
0 1 Ford 1 Falcon 2 Focus NaN NaN
1 2 Holden 1 Commodore NaN NaN NaN NaN
2 3 Kia 1 Sorento 2 Rio 2 Sportage
我目前所擁有的適用於 99 行,速度很慢,而且是一種混亂的方式。 但我不確定如何改進它。
import pandas as pd
company_df = pd.DataFrame([[1, 'Ford'], [2, 'Holden'], [3, 'Kia']], columns=['Company_ID', 'Company_Name'])
car_df = pd.DataFrame([[1, 1, 'Falcon'], [1, 2, 'Focus'], [2, 1, 'Commodore'], [3, 1, 'Sorento'], [3, 2, 'Rio'], [3, 2, 'Sportage']], columns=['Company_ID', 'Car_ID', 'Car_Name'])
for i in range(1, 3): # looping through car ids up to maximum, I don't want to do this though
car_by_id_df = car_df[car_df.Car_ID==i] # select cars with current loop iterator/index
car_by_id_df.columns = map(lambda col: '{}_{}'.format(col, i), car_by_id_df.columns) # rename all columns with ID as suffix,
car_by_id_df.rename(columns={'Company_ID_{}'.format(i): 'Company_ID'}, inplace=True) # Rename joining column back to original
company_df = company_df.merge(right=car_by_id_df, on='Company_ID', how='left') # Merge
print(company_df)
這將返回以下內容。 請注意, Kia
是重復的,因為Rio
和Sportage
具有相同的 id。 我無法更改Car_ID
列中的數據,而且我不確定 pivot 和 dataframe 的其他方法。
Company_ID Company_Name Car_ID_1 Car_Name_1 Car_ID_2 Car_Name_2
0 1 Ford 1 Falcon 2 Focus
1 2 Holden 1 Commodore NaN NaN
2 3 Kia 1 Sorento 2 Rio
3 3 Kia 1 Sorento 2 Sportage
如何按組 pivot 我的car_df
並合並到company_id
?
這可以解決問題:
res=Car_DF.set_index("Company_ID").stack().to_frame()
res["sub_no"]=res.groupby(level=[0,1]).cumcount().add(1).astype(str)
res=res.reset_index(level=1)
res["level_1"]=res["level_1"].str.cat(res["sub_no"], sep="_")
res=res.drop("sub_no", axis=1).set_index("level_1", append=True).unstack("level_1")
res.columns=map(lambda x: x[1], res.columns)
res=res[sorted(res.columns, key=lambda x: x.split("_")[-1])]
res=Company_DF.merge(res, on="Company_ID", how="left")
輸出:
Company_ID Company_Name ... Car_ID_3 Car_Name_3
0 1 Ford ... NaN NaN
1 2 Holden ... NaN NaN
2 3 Kia ... 2 Sportage
找到了解決方案。 我不喜歡使用 for 循環,但它確實有效,而且速度相對較快。
import pandas as pd
Company_DF = pd.DataFrame([[1, 'Ford'], [2, 'Holden'], [3, 'Kia']], columns=['Company_ID', 'Company_Name'])
Car_DF = pd.DataFrame([[1, 1, 'Falcon'], [1, 2, 'Focus'], [2, 1, 'Commodore'], [3, 1, 'Sorento'], [3, 2, 'Rio'], [3, 2, 'Sportage']], columns=['Company_ID', 'Car_ID', 'Car_Name'])
Car_DF['rank'] = Car_DF.groupby(['Company_ID']).cumcount() + 1
for ranking_number in range(Car_DF['rank'].min(), Car_DF['rank'].max()):
Ranked_Car_DF = Car_DF[Car_DF['rank']==ranking_number].copy()
Ranked_Car_DF.columns = map(lambda col: '{}_{}'.format(col, ranking_number), Ranked_Car_DF.columns)
Ranked_Car_DF.rename(columns={'Company_ID_{}'.format(ranking_number): 'Company_ID'}, inplace=True)
Company_DF = Company_DF.merge(right=Ranked_Car_DF, on='Company_ID', how='left')
print(Company_DF)
聲明:本站的技術帖子網頁,遵循CC BY-SA 4.0協議,如果您需要轉載,請注明本站網址或者原文地址。任何問題請咨詢:yoyou2525@163.com.