淺談python元素如何去重,去重后如何保持原來元素的順序不變

python列表元素去重后如何保持原來的順序不變

原列表：

list1 = [1,2,1,4,9,3,5,2,6,7,3,1,6,8,4,0]

去重，使用集合set來去重：

list2 = list(set(list1)

set去重得到的list2默認按升序進行排序：

list2 = [0, 1, 2, 3, 4, 5, 6, 7, 8, 9]

使list2按照list1元素出現的順序進行排序（也就是原來的順序）：

list2.sort(key = list1.index)

此時，list2 = [1, 2, 4, 9, 3, 5, 6, 7, 8, 0]

具體的實現過程如下：

補充拓展：python爬取鏈接去重

我就廢話不多說了，直接上代碼吧！

from urllib.request import urlopenfrom bs4 import BeautifulSoupimport re pages = set()def getLinks(pageUrl):global pageshtml = urlopen('http://en.wikipedia.org'+pageUrl)bsObj = BeautifulSoup(html)for link in bsObj.findAll('a',href = re.compile('^(/wiki/)')):if ’href’ in link.attrs:if link.attrs[’href’] not in pages:#遇到新的頁面 newPage = link.attrs[’href’] print(newPage) pages.add(newPage) getLinks(newPage)getLinks('')

以上這篇淺談python元素如何去重,去重后如何保持原來元素的順序不變就是小編分享給大家的全部內容了，希望能給大家一個參考，也希望大家多多支持好吧啦網。