dataframe去除重复行

可以使用 pandas 库中的 drop_duplicates() 函数来去除 dataframe 中的重复行，例如：

import pandas as pd

# 创建一个示例 dataframe
df = pd.DataFrame({'A': [1, 2, 3, 2, 1], 'B': [4, 5, 6, 6, 4]})

# 输出原始 dataframe
print('原始 dataframe：')
print(df)

# 去除重复行
df = df.drop_duplicates()

# 输出去重后的 dataframe
print('去重后的 dataframe：')
print(df)

执行上述代码后，输出结果如下：

原始 dataframe：
   A  B
0  1  4
1  2  5
2  3  6
3  2  6
4  1  4
去重后的 dataframe：
   A  B
0  1  4
1  2  5
2  3  6
3  2  6

可以看到，去重后的 dataframe 中已经没有重复行了。