python去重csv

你可以使用Python的pandas库来去重csv文件。使用pandas库的drop_duplicates()函数可以去除csv文件中的重复行。以下是一个示例代码：

import pandas as pd

# 读取csv文件
df = pd.read_csv('file.csv')

# 去重
df.drop_duplicates(inplace=True)

# 保存去重后的csv文件
df.to_csv('file_no_duplicates.csv', index=False)

这样就可以将原始的csv文件去重后保存为一个新的csv文件。