python中去重的可迭代对象

在Python中，对于需要去除重复元素的可迭代对象（如列表、元组或集合），有几种常见的方法：

1. **set()**：这是最直接的方法，可以将可迭代对象转换为集合，因为集合内的元素是唯一的，所以重复会被自动移除。例如：

   unique_items = list(set(my_list))

2. **dict.fromkeys()**：如果可迭代对象适合做键（key），可以用`dict()`构造函数创建一个字典，然后提取键，因为字典的键是唯一的，可以达到去重的效果。不过需要注意的是，顺序会改变：

   unique_items = list(dict.fromkeys(my_iterable))

3. **filter() + lambda表达式**：利用filter函数过滤出唯一元素，配合lambda表达式检查元素是否已存在于结果集中：

   unique_items = list(filter(lambda x: x not in unique_items, my_iterable))

这种方法效率较低，尤其是对于大对象。

4. **列表推导式**：通过比较每个元素和新生成的列表来去重，虽然简洁，但对于大型数据集效率不高：

   unique_items = [x for i, x in enumerate(my_iterable) if x not in unique_items[:i]]