Python 对Ecxel文件的某一列数据进行去重，将结果在原文件上添加新列，不改变原有数据

在Python中，我们可以使用pandas库处理Excel文件，特别是对于数据清洗和去重操作。以下是一个基本步骤来完成这个任务：

1. 首先，安装pandas和openpyxl库（如果尚未安装），可以使用pip命令：

pip install pandas openpyxl

2. 使用pandas读取Excel文件并选择需要的列：

import pandas as pd

df = pd.read_excel('your_file.xlsx', sheet_name='Sheet1')  # 更改为你实际的文件名和工作表名称
column_to_check = df['YourColumnName']  # 替换为你要去重的列名

3. 对指定列的数据进行去重：

unique_values = column_to_check.drop_duplicates()  # 去除重复值

4. 添加新的列到原始DataFrame，表示是否重复：

df['IsDuplicate'] = df['YourColumnName'].apply(lambda x: x in unique_values)  # 将新列标记为True或False，表示该值是否重复

5. 如果你想在原地修改Excel文件，需要保存更改：

# 保存到原文件，这里使用openpyxl，如果你的数据量很大，可能会更推荐使用xlsxwriter
df.to_excel('your_file.xlsx', index=False, engine='openpyxl', if_exists='append')  # 表示追加数据

记得替换上述代码中的文件路径、工作表名和列名。执行以上代码后，你会在原Excel文件的最后添加一个新的列，表示每个原始单元格的值是否重复。