python去除列表中重复元素的方法

列表中元素位置的索引用的是L.index
本文实例讲述了Python去除列表中重复元素的方法。分享给大家供大家参考。具体如下：
比较容易记忆的是用内置的set

1. l1 = ['b','c','d','b','c','a','a']
2. l2 = list(set(l1))
3. print (l2)

复制代码

还有一种据说速度更快的，没测试过两者的速度差别

1. l1 = ['b','c','d','b','c','a','a']
2. l2 = {}.fromkeys(l1).keys()
3. print (l2)

复制代码

这两种都有个缺点，祛除重复元素后排序变了：

1. ['a', 'c', 'b', 'd']

复制代码

如果想要保持他们原来的排序：
用list类的sort方法

1. l1 = ['b','c','d','b','c','a','a']
2. l2 = list(set(l1))
3. l2.sort(key=l1.index)
4. print (l2)

复制代码

也可以这样写

1. #Python学习交流群：711312441
2. l1 = ['b','c','d','b','c','a','a']
3. l2 = sorted(set(l1),key=l1.index)
4. print (l2)

复制代码

也可以用遍历

1. l1 = ['b','c','d','b','c','a','a']
2. l2 = []
3. for i in l1:
4.   if not i in l2:
5.     l2.append(i)
6. print (l2)

复制代码

上面的代码也可以这样写

1. l1 = ['b','c','d','b','c','a','a']
2. l2 = []
3. [l2.append(i) for i in l1 if not i in l2]
4. print (l2)

复制代码

这样就可以保证排序不变了
在pythoncook里边提到的一种面向可哈希数据的取出相同元素的方法是：利用到了集合与生成器set、yield

1. def dedupe(items):
2. seen = set()
3. for item in items:
4. if item not in seen:
5. yield item
6. seen.add(item)

复制代码

不可变类型可哈希，可变类型不可哈希，对于不可哈希的数据
上述代码改成：

1. def dedupe(items, key=None):
2. seen = set()
3. for item in items:
4. val = item if key is None else key(item)
5. if val not in seen:
6. yield item
7. seen.add(val)

复制代码

免责声明：如果侵犯了您的权益，请联系站长，我们会及时删除侵权内容，谢谢合作！