1.for 循环去重
list1 = [3,2, 1, 3, 4, 7,1,5,2, 1,'测试1','测试2','测试1','测试3']
temp = []
for i in list1:
if not i in temp:
temp.append(i)
print(temp)
[3, 2, 1, 4, 7, 5, '测试1', '测试2', '测试3']
Process finished with exit code 0
2. 列表推导式去重
list1 = [3,2, 1, 3, 4, 7,1,5,2, 1,'测试1','测试2','测试1','测试3']
temp = []
[temp.append(i) for i in list1 if i not in temp]
print(temp)
[3, 2, 1, 4, 7, 5, '测试1', '测试2', '测试3']
Process finished with exit code 0
3. set去重
使用set的特型，python的set和其他语言类似, 是一个无序不重复元素集
list1 = [3,2, 1, 3, 4, 7,1,5,2, 1,'测试1','测试2','测试1','测试3']
temp = list(set(list1))
print(temp)
[1, 2, 3, 4, 5, 7, '测试2', '测试3', '测试1']
Process finished with exit code 0
4. 使用字典fromkeys()的方法来去重
Python 字典 fromkeys() 函数用于创建一个新字典，以序列 seq 中元素做字典的键，value 为字典所有键对应的初始值。
语法
fromkeys()方法语法：
dict.fromkeys(seq[, value])
参数
seq -- 字典键值列表。
value -- 可选参数, 设置键序列（seq）的值。
返回值
该方法返回一个新字典。
list1 = [3,2, 1, 3, 4, 7,1,5,2, 1,'测试1','测试2','测试1','测试3']
temp = {}.fromkeys(list1).keys()
print(temp)
print(list(temp))
dict_keys([3, 2, 1, 4, 7, 5, '测试1', '测试2', '测试3'])
[3, 2, 1, 4, 7, 5, '测试1', '测试2', '测试3']
5.使用sort + set去重（保持原来的顺序）
list1 = [3,2, 1, 3, 4, 7,1,5,2, 1,'测试1','测试2','测试1','测试3']
list2 = list(set(list1))
list2.sort(key=list1.index)
print(list2)
[3, 2, 1, 4, 7, 5, '测试1', '测试2', '测试3']
Process finished with exit code 0
6. 使用sorted+ set函数去重
list1 = [3,2, 1, 3, 4, 7,1,5,2, 1,'测试1','测试2','测试1','测试3']
temp = sorted(set(list1), key=list1.index)
print(temp)
[3, 2, 1, 4, 7, 5, '测试1', '测试2', '测试3']
Process finished with exit code 0
|