如何有效删除 Pandas 中特定列的重复行？

在 Python Pandas 中删除多列中的重复行

pandas drop_duplicates 函数可以消除 DataFrame 中的重复行，DataFrame 是数据清理的宝贵工具。要扩展此功能，可以指定要检查唯一性的列。

例如，考虑以下 DataFrame：

    A   B   C
0   foo 0   A
1   foo 1   A
2   foo 1   B
3   bar 1   A

假设您要删除列中具有相同值的行“A”和“C”。在这种情况下，第 0 行和第 1 行将被消除。

以前，此任务需要手动过滤或复杂的操作。然而，随着 pandas 增强的 drop_duplicates 功能，现在变得轻而易举。 keep 参数的引入允许您控制如何处理重复项。

要删除与特定列匹配的行，请使用subset 参数。通过将 keep 设置为 False，您可以指示 pandas 消除所有重复的行：

import pandas as pd
df = pd.DataFrame({"A":["foo", "foo", "foo", "bar"], "B":[0,1,1,1], "C":["A","A","B","A"]})
df.drop_duplicates(subset=['A', 'C'], keep=False)

输出：

    A   B   C
2   foo 1   B
3   bar 1   A

如您所见，第 0 行和第 1 行已成功删除，只留下基于列“A”和“C”中的值唯一的行。

以上是如何有效删除 Pandas 中特定列的重复行？的详细内容。更多信息请关注PHP中文网其他相关文章！