python删除excel重复记录

以下是使用Python删除Excel重复记录的方法：

import pandas as pd

# 读取Excel文件
data = pd.read_excel('data.xlsx')

# 去重操作
data.drop_duplicates(subset='column_name', inplace=True)

# 保存去重后的数据到新的Excel文件
data.to_excel('new_data.xlsx', index=False)

其中，`data.xlsx`是需要去重的Excel文件名，`column_name`是需要去重的列名。执行完上述代码后，会生成一个新的Excel文件`new_data.xlsx`，其中已经删除了重复记录。

相关问题

pandas删除excel的重复行

要使用pandas库删除Excel文件中的重复行，你可以按照以下步骤进行：

1. **导入Pandas库**[^1]:

   import pandas as pd

2. **加载Excel数据**:

   excel_file = pd.read_excel('your_excel_file.xlsx')

3. **识别并标记重复行**:
使用`duplicated()`函数标记重复行，可以根据特定列（如`subset=['column_name']`)来指定哪些列参与判断重复。默认情况下，`keep='first'`表示保留每个唯一组合的第一条记录，其余为重复。

   df['is_duplicate'] = excel_file.duplicated(subset=['column_name'], keep=False)

4. **删除重复行**:
如果你想删除重复行，可以基于上述标记的`is_duplicate`列筛选非重复行：

   cleaned_df = excel_file[~excel_file['is_duplicate']]

5. **保存更新后的数据**:

   cleaned_df.to_excel('new_cleaned_file.xlsx', index=False)

或者，如果你想保留原始文件并创建一个新的副本，可以这样写：

   cleaned_df.to_excel('original_file_with_duplicates_removed.xlsx', 'Sheet2', index=False)

python删除excel中第一列中重复60次以上的等于0的的数据，使用openpy不用sum函数

好的，以下是使用 openpyxl 库删除 Excel 第一列中值为0且重复60次以上的行的代码，不使用 `sum()` 函数：

import openpyxl

# 打开 Excel 文件
wb = openpyxl.load_workbook('example.xlsx')

# 选择一个工作表
sh = wb['Sheet1']

# 计算每个值为0的单元格出现的次数
count_dict = {}
for row in range(1, sh.max_row + 1):
    value = sh.cell(row=row, column=1).value
    if value == 0:
        count_dict[row] = count_dict.get(row, 0) + 1

# 删除值为0且重复60次以上的行
for row, count in count_dict.items():
    if count >= 60:
        sh.delete_rows(row, count)

# 保存修改后的 Excel 文件
wb.save('example_modified.xlsx')

该代码首先使用一个字典 `count_dict` 来记录每个值为0的单元格出现的次数。具体来说，我们遍历工作表的所有行，对于每一行，如果第一列的值为0，则将该行的行号作为字典的键，将该行出现次数加1，作为字典的值。接下来，我们遍历字典中的每个键值对，如果值大于等于60，则删除从该行开始的连续的60行。最后，我们保存修改后的 Excel 文件。