dataframe如何去掉重复的行

可以使用pandas库中的`drop_duplicates()`方法来删除DataFrame中的重复行。这个方法会返回一个新的DataFrame，其中所有重复的行已被删除。

举个例子，假设我们有一个DataFrame叫做`df`，其中包含重复的行：

   name  age
0   Tom   20
1  John   25
2  Mary   20
3   Tom   20
4  Mary   22

我们可以使用以下代码删除重复的行：

df.drop_duplicates(inplace=True)

这会修改原始DataFrame并删除重复的行。结果如下所示：

   name  age
0   Tom   20
1  John   25
2  Mary   20
4  Mary   22

注意，上述代码中的`inplace=True`参数表示直接在原始DataFrame上进行修改，而不是返回一个新的DataFrame。如果不想修改原始DataFrame，可以将`inplace`参数设置为`False`。

相关问题

dataframe去除重复行

可以使用 pandas 库中的 drop_duplicates() 函数来去除 dataframe 中的重复行，例如：

import pandas as pd

# 创建一个示例 dataframe
df = pd.DataFrame({'A': [1, 2, 3, 2, 1], 'B': [4, 5, 6, 6, 4]})

# 输出原始 dataframe
print('原始 dataframe：')
print(df)

# 去除重复行
df = df.drop_duplicates()

# 输出去重后的 dataframe
print('去重后的 dataframe：')
print(df)

执行上述代码后，输出结果如下：

原始 dataframe：
   A  B
0  1  4
1  2  5
2  3  6
3  2  6
4  1  4
去重后的 dataframe：
   A  B
0  1  4
1  2  5
2  3  6
3  2  6

可以看到，去重后的 dataframe 中已经没有重复行了。

去除dataframe中重复行

在Pandas DataFrame中去除重复行通常有两种常见的方法：

1. **drop_duplicates()** 函数：这个函数可以直接删除DataFrame中的重复行。默认情况下，它会基于所有列的值进行判断。如果你只想基于特定的列去重，可以指定`subset`参数。示例代码如下：

   df.drop_duplicates(inplace=True)

如果你想保留第一次出现的重复行并将之后的删除，可以设置`keep='first'`；如果你想保留最后一次出现的，设置`keep='last'`。

2. **duplicated()** + **loc[]** 或者 **drop_duplicates(subset=None, keep='first', ...)** 的组合：首先使用`duplicated()`函数获取布尔索引，然后选择不重复的数据。示例：

   duplicated_rows = df.duplicated()
   df_no_duplicates = df[~duplicated_rows]