list列表中分装的对象多个字段进行去重复操作

在Python中，如果你有一个`list`，其中包含一些对象，这些对象有多个属性需要进行去重操作，你可以采用以下几种方法：

1. **哈希集合（Set）**：首先将对象转换为元组，因为集合只关心元素本身而不关心其嵌套结构。然后，你可以将元组放入`set`中，因为`set`自动去除重复元素。最后，再从`set`转回列表。

def remove_duplicates(lst):
    unique_objects = set(tuple(obj.items()) for obj in lst)
    return [dict(t) for t in unique_objects]

# 示例
objects = [{'field1': 'value1', 'field2': 'value2'}, {'field1': 'value1', 'field3': 'value3'}, ...]
new_list = remove_duplicates(objects)

2. **字典（Dictionary）**：如果对象是可哈希的，并且每个对象的所有属性值都是唯一的组合，可以尝试用字典存储，键就是对象自身，因为字典不允许重复键。

def remove_duplicates_by_dict(lst):
    unique_objs = {}
    result = []
    for obj in lst:
        key = frozenset(obj.items())  # 使用frozenset防止修改对象影响hash
        if key not in unique_objs:
            unique_objs[key] = obj
            result.append(obj)
    return result

# 示例同上

3. **自定义排序比较函数（如果属性是可比较的）**：如果你能对对象的属性进行排序并保证排序后的顺序唯一，可以用`sorted`配合`lambda`表达式来过滤重复。

def remove_duplicates_sorted(lst, by_fields):
    def obj_key(obj):
        return tuple(getattr(obj, field) for field in by_fields)
    return list({obj_key(obj): obj for obj in lst}.values())

# 示例
unique_list = remove_duplicates_sorted(objects, ['field1', 'field2'])