用python清洗掉csv文件中重复的一行值
时间: 2023-06-25 16:08:00 浏览: 198
python去除文件中重复的行实例
可以使用pandas库来读取csv文件并清除重复行。可以按以下方式实现:
```python
import pandas as pd
# 读取csv文件
df = pd.read_csv('filename.csv')
# 删除重复行
df.drop_duplicates(inplace=True)
# 将清洗后的数据保存为新的csv文件
df.to_csv('cleaned_filename.csv', index=False)
```
在这个例子中,`drop_duplicates()`函数用于删除重复行。`inplace=True`参数用于直接修改原始数据框,而不是返回一个新的数据框。`to_csv()`函数用于将清洗后的数据保存为新的csv文件,`index=False`参数用于不保存行索引。
阅读全文