목록에서 중복 항목을 제거하는 방법 Python

Python 목록에서 중복 항목 제거

목록은 다양한 내용을 포함하는 컨테이너입니다. Python 정수, 단어, 값 등이 될 수 있는 객체입니다. 이는 다른 프로그래밍 언어의 배열과 동일합니다.

여기서는 주어진 목록에서 중복을 제거하는 다양한 방법을 살펴보겠습니다. Python.

방법 1) Set을 사용하여 목록에서 중복 항목을 제거합니다.

리스트에서 중복을 제거하려면 내장 함수인 `set()`을 사용할 수 있습니다. `set()` 메서드의 특징은 서로 다른 요소만 반환한다는 점입니다.

[1,1,2,3,2,2,4,5,6,2,1]이라는 리스트가 있습니다. 이 리스트에는 중복된 요소가 많으므로 이를 제거하고 서로 다른 요소만 남겨야 합니다. 이 리스트는 `set()` 내장 함수에 전달됩니다. Later 최종 목록은 내장 함수인 list()를 사용하여 표시됩니다.

우리가 얻는 출력은 중복 요소가 모두 제거된 고유한 요소들입니다.

예시

my_list = [1,1,2,3,2,2,4,5,6,2,1]
my_final_list = set(my_list)
print(list(my_final_list))

출력:

[1, 2, 3, 4, 5, 6]

방법 2) 임시 목록 사용

주어진 목록에서 중복 항목을 제거하려면 빈 임시 목록을 활용할 수 있습니다. 이를 위해서는 먼저 중복 항목이 있는 목록을 순회하면서 고유한 항목만 임시 목록에 추가해야 합니다. Later 임시 목록은 기본 목록에 할당됩니다.

예시

다음은 임시 목록을 사용한 작동 예시입니다.

my_list = [1, 2, 3, 1, 2, 4, 5, 4 ,6, 2]
print("List Before ", my_list)
temp_list = []

for i in my_list:
    if i not in temp_list:
        temp_list.append(i)

my_list = temp_list

print("List After removing duplicates ", my_list)

출력:

List Before  [1, 2, 3, 1, 2, 4, 5, 4, 6, 2]
List After removing duplicates  [1, 2, 3, 4, 5, 6]

방법 3) Dict 사용

`collections` 패키지에서 `OrderedDict`를 임포트하면 주어진 리스트에서 중복을 제거할 수 있습니다. `OrderedDict`는 파이썬 2.7 이상에서 사용할 수 있습니다. `OrderedDict`는 키가 존재하는 순서대로 고유한 요소들을 반환합니다.

리스트를 사용하고 OrderedDict에서 제공하는 fromkeys() 메서드를 이용하여 리스트에서 고유한 요소를 가져오도록 하겠습니다.

OrderedDict.fromkeys() 메서드를 사용하려면 아래와 같이 collections에서 OrderedDict를 가져와야 합니다.

from collections import OrderedDict

다음은 OrderedDict.fromkeys() 메서드를 사용하여 중복을 제거하는 예입니다.

예시

from collections import OrderedDict

my_list = ['a','x','a','y','a','b','b','c']

my_final_list = OrderedDict.fromkeys(my_list)

print(list(my_final_list))

출력:

['a', 'x', 'y', 'b', 'c']

이와 같은 서비스: Python 버전 3.5 이상에서는 일반적인 `dict.fromkeys()` 메서드를 사용하여 리스트에서 고유한 요소를 가져올 수 있습니다. `dict.fromkeys()` 메서드는 고유한 키를 반환하므로 중복 값을 제거하는 데 도움이 됩니다.

리스트에서 고유한 항목을 얻기 위해 dict.fromkeys()를 사용하는 방법을 보여주는 예는 다음과 같습니다.

예시

my_list = ['a','x','a','y','a','b','b','c']
my_final_list = dict.fromkeys(my_list)
print(list(my_final_list))

출력:

['a', 'x', 'y', 'b', 'c']

방법 4) for 루프 사용

사용 for 루프, 중복 항목을 제거하기 위해 항목 목록을 순회합니다.

먼저 배열을 빈 문자열([])로 초기화합니다. for 루프 안에서 리스트의 항목들이 myFinallist 배열에 이미 존재하는지 확인합니다. 만약 항목이 존재하지 않으면 append() 메서드를 사용하여 해당 항목을 myFinallist 배열에 추가합니다.

따라서 중복 항목이 발견되면 해당 항목은 이미 myFinallist 배열에 존재하므로 삽입되지 않습니다. 아래 예시를 통해 이를 확인해 보겠습니다.

예시

my_list = [1,2,2,3,1,4,5,1,2,6]
myFinallist = []
for i in my_list:
    if i not in myFinallist:
myFinallist.append(i)
print(list(myFinallist))

출력:

[1, 2, 3, 4, 5, 6]

방법 5) 목록 이해 사용

목록 이해는 다음과 같습니다. Python 이미 생성된 시퀀스를 사용하여 새 시퀀스(예: 목록, 사전 등)를 생성하는 데 사용되는 함수입니다. 이렇게 하면 긴 루프를 줄이고 코드를 더 쉽게 읽고 유지 관리할 수 있습니다.

주어진 목록에서 중복된 항목을 제거하기 위해 목록 이해를 활용해 보겠습니다.

예시

my_list = [1,2,2,3,1,4,5,1,2,6]
my_finallist = []
[my_finallist.append(n) for n in my_list if n not in my_finallist]
print(my_finallist)

출력:

[1, 2, 3, 4, 5, 6]

방법 6) NumPy의 unique() 메서드 사용

NumPy 모듈의 unique() 메서드를 사용하면 주어진 목록에서 중복을 제거할 수 있습니다.

NumPy를 사용하려면 먼저 numpy 모듈을 가져와야 합니다.

단계 1) NumPy 모듈을 가져옵니다.

import numpy as np

단계 2) 중복된 요소가 포함된 리스트를 unique() 메서드 안에 사용하세요. 출력 결과는 tolist() 메서드를 사용하여 다시 리스트 형태로 변환됩니다.

myFinalList = np.unique(my_list).tolist()

단계 3) 마지막으로 목록을 출력합니다.

print(myFinalList)

출력이 포함된 최종 코드는 다음과 같습니다.

import numpy as np
my_list = [1,2,2,3,1,4,5,1,2,6]
myFinalList = np.unique(my_list).tolist()
print(myFinalList)

출력:

[1, 2, 3, 4, 5, 6]

방법 7) Pandas 메서드 사용

Pandas 모듈에는 주어진 목록에서 고유한 요소를 제공하는 Unique() 메서드가 있습니다.

Pandas 모듈을 사용하려면 다음 단계를 따르세요.

단계 1) Pandas 모듈 가져오기

import pandas as pd

단계 2) 중복된 항목이 포함된 리스트를 unique() 메서드 안에 사용하세요.

myFinalList = pd.unique(my_list).tolist()

단계 3) 목록을 출력하세요:

print(myFinalList)

출력이 포함된 최종 코드는 다음과 같습니다.

import pandas as pd

my_list = [1,2,2,3,1,4,5,1,2,6]
myFinalList = pd.unique(my_list).tolist()
print(myFinalList)

출력:

[1, 2, 3, 4, 5, 6]

방법 8) enumerate() 및 목록 이해 사용

여기서는 리스트 컴프리헨션과 enumerate() 함수를 조합하여 중복 요소를 제거합니다. enumerate() 함수는 리스트의 각 요소에 대한 카운터를 포함하는 객체를 반환합니다. 예를 들어 (0,1), (1,2) 등입니다. 여기서 첫 번째 값은 인덱스이고 두 번째 값은 리스트 항목입니다.

각 요소가 목록에 있는지 확인하고, 있으면 목록에서 제거합니다.

예시

my_list = [1,2,2,3,1,4,5,1,2,6]
my_finallist = [i for j, i in enumerate(my_list) if i not in my_list[:j]]
print(list(my_finallist))

출력:

[1, 2, 3, 4, 5, 6]

자주 묻는 질문