关于drop_duplicates()函数说法
时间: 2024-06-13 19:08:00 浏览: 112
Python DataFrame使用drop_duplicates()函数去重(保留重复值,取重复值)
5星 · 资源好评率100%
drop_duplicates()函数是pandas中的一个函数,可以通过SQL中关键字distinct的用法来理解,根据指定的字段对数据集进行去重处理。该函数的具体参数如下:
- subset:设置根据列的子集来判断重复值,默认根据DataFrame的所有列来判断重复值,即所有列的数据都相同时,才算重复值。
- keep:可选参数有三个:‘first’、‘last’、False,默认值‘first’。其中,first表示保留第一次出现的重复行,删除后面的重复行。last表示删除重复项,保留最后一次出现。False表示删除所有重复项。
- inplace:是否在原数据上进行修改。True表示在原数据上进行修改,False表示返回一个新的DataFrame。
例如:
```python
import pandas as pd
df = pd.DataFrame({'A': [1, 2, 2], 'B': [3, 4, 5]})
print(df)
# output:
# A B
# 0 1 3
# 1 2 4
# 2 2 5
df.drop_duplicates(subset=['A'], keep='first', inplace=True)
print(df)
# output:
# A B
# 0 1 3
# 2 2 5
```
阅读全文