如何在不刪除 NaN 值的情況下刪除 pandas 中的重復項

Question

我有一個 dataframe 查詢，我只想從某個列中獲取唯一值。
我嘗試執行此代碼：

    database = pd.read_csv(db_file, sep='\t')
    query = database.loc[database[db_specifications[0]].isin(elements)].drop_duplicates(subset=db_specification[1])

db_specification只是一個包含我查詢的兩列的列表。
有些值是NaN ，我不想認為它們是重復的，我該如何實現呢？

Answer 1

您可以首先選擇所有NaN ，然后在 dataframe 的 rest 上刪除重復項。

mask = data.isna().any()
data = pd.concat([data[mask], data[~mask]])