python怎么删除重复行

可以使用pandas库来删除重复行，具体步骤如下：

1. 读取数据：使用pandas库的read_csv()函数读取数据文件，生成DataFrame对象。

import pandas as pd
df = pd.read_csv('data.csv')

2. 删除重复行：使用pandas库的drop_duplicates()函数删除重复行，该函数默认会保留第一个出现的重复行，可以通过参数keep来指定保留哪一个。

df.drop_duplicates(inplace=True)

其中，inplace=True表示对原DataFrame对象进行修改，不需要赋值给新的变量。如果不加该参数，则需要将返回值赋值给新的变量。

3. 保存数据：使用pandas库的to_csv()函数将处理后的数据保存到文件。

df.to_csv('new_data.csv', index=False)

其中，index=False表示不保存行索引。

完整代码如下：

import pandas as pd

# 读取数据
df = pd.read_csv('data.csv')

# 删除重复行
df.drop_duplicates(inplace=True)

# 保存数据
df.to_csv('new_data.csv', index=False)

以上代码会将原数据文件中的重复行删除，并将处理后的数据保存到new_data.csv文件中。