AI 스프레드시트 중복값 정리: 같은 데이터가 반복될 때 확인하는 순서

스프레드시트에서 같은 데이터가 여러 번 나온다고 해서 바로 지우기부터 하면 안 됩니다. 진짜 중복인지, 아니면 표기만 다른 별개의 데이터인지부터 구분해야 하기 때문입니다.

 

저도 예전에 거래처 목록을 "중복 항목 제거"로 한 번에 정리했다가, 사실은 같은 회사인데 "㈜"와 "(주)"로 표기가 달라서 서로 다른 데이터로 남아 있는 것을 나중에 발견한 적이 있습니다. 그날 이후로 중복값을 정리할 때는 나름대로 순서를 정해두고 확인합니다.

 

중복 데이터는 단순히 많이 입력된 값을 찾아 삭제하는 작업처럼 보이지만, 실제로는 무엇을 같은 데이터로 볼 것인지 먼저 정하는 과정이 필요합니다.

1. 중복인지 먼저 눈으로 확인하기

엑셀에서는 값이나 문자열이 조금만 달라도 서로 다른 데이터로 처리될 수 있습니다. 공백이나 띄어쓰기, 특수문자 등의 차이 때문에 사람이 보기에는 비슷해 보여도 동일한 값으로 인식되지 않는 경우가 있기 때문입니다.

 

그래서 가장 먼저 할 일은 무조건 중복을 삭제하는 것이 아니라, 비슷해 보이는데 다르게 인식될 만한 항목부터 찾아보는 것입니다.

 

특히 다음과 같은 부분을 살펴보면 좋습니다.

• 앞뒤 공백이 섞여 있는지
• 전각/반각 문자, 특수기호 표기가 섞여 있는지
• 대소문자나 띄어쓰기가 다른지

지우기 전에 순서대로 확인하세요

 

예를 들어 "㈜스마트라이프"와 "스마트라이프(주)"가 있다면 사람은 같은 회사를 의미한다고 판단할 수 있지만, 단순한 중복 제거 기능만으로는 같은 대상으로 묶이지 않을 수 있습니다.

따라서 삭제보다 확인이 먼저입니다.

2. 엑셀 기본 기능으로 1차 걸러내기

1) 조건부 서식으로 강조하기

[홈] 탭 → [조건부 서식] → [셀 강조 규칙] → [중복 값]을 선택하면 중복으로 판단되는 셀을 색으로 표시할 수 있습니다.

이 기능의 장점은 데이터를 바로 삭제하지 않고 눈으로 먼저 확인할 수 있다는 것입니다.

 

중복값을 정리하기 전에 조건부 서식으로 어떤 데이터가 중복으로 표시되는지 확인하면, 실수로 필요한 데이터를 지우는 일을 줄이는 데 도움이 됩니다.

2) 중복된 항목 제거 기능

확인이 끝났다면 [데이터] 탭 → [중복된 항목 제거]를 이용해 실제 삭제를 진행할 수 있습니다.

 

이때 중요한 것은 어떤 열을 기준으로 중복을 판단할 것인지입니다. 이 기능은 여러 열 중 값이 같은 값이 2개 이상 있을 경우 가장 위 데이터만 남기고 나머지를 지우는 방식으로 작동하므로, 어떤 열을 선택했는지 반드시 확인해야 합니다.

 

예를 들어 회사명만 기준으로 중복을 판단할 것인지, 회사명과 주소를 함께 기준으로 판단할 것인지에 따라 결과가 달라질 수 있습니다.

 

따라서 삭제 버튼을 누르기 전에 선택된 열과 데이터 범위를 다시 확인하는 것이 좋습니다.

3) 원본 유지가 필요하면 UNIQUE 함수

데이터를 바로 지우지 않고 고유 값만 별도로 뽑아보고 싶다면 =UNIQUE(범위) 수식을 사용할 수 있습니다.

이 방법은 원본 데이터를 그대로 유지하면서 중복이 제거된 목록을 별도의 영역에 만들어볼 수 있다는 장점이 있습니다.

따라서 "실제로 삭제하기 전에 결과부터 확인하고 싶다"는 경우에는 중복 제거 기능과 다른 방식으로 활용할 수 있습니다.

3. AI에게 맡기면 좋은 부분

엑셀의 기본적인 중복 확인 기능은 값 자체를 기준으로 중복 여부를 판단하는 데 유용합니다. 반면 "㈜스마트라이프"와 "스마트라이프(주)"처럼 의미는 같지만 표기가 다른 경우에는 단순한 중복 제거만으로 처리하기 어려울 수 있습니다.

저는 이런 애매한 목록만 추려서 ChatGPT나 Claude에 붙여넣고,

"같은 대상을 가리키는데 표기만 다른 항목을 찾아줘."

 

라고 요청하는 방식을 씁니다.

이때 중요한 것은 AI가 제안한 결과를 그대로 적용하지 않고 반드시 원본과 대조하는 절차를 남겨두는 것입니다.

 

AI는 비슷한 이름을 보고 같은 대상을 의미한다고 판단할 수 있지만, 실제로는 서로 다른 회사나 고객일 가능성도 있기 때문입니다. 특히 거래처·고객 명단처럼 데이터의 정확성이 중요한 경우에는 AI의 판단을 최종 결과로 사용하기보다, 검토할 후보를 좁히는 용도로 활용하는 편이 안전합니다.

4. 비교표로 보는 방법별 차이

방법	무엇을 잡아내나	원본 데이터	이런 상황에 적합
조건부 서식	완전히 동일한 문자열	유지됨(색상만 표시)	지우기 전 눈으로 확인할 때
중복된 항목 제거	완전히 동일한 문자열	삭제됨	확인이 끝난 뒤 바로 정리할 때
UNIQUE 함수	완전히 동일한 문자열	유지됨(별도 목록 생성)	원본은 남기고 고유 목록만 필요할 때
AI 검토	표기만 다른 유사 항목	사람이 최종 확인	회사명·주소처럼 표기가 제각각인 데이터

각 방법은 역할이 다릅니다.

조건부 서식은 찾아서 확인하는 단계, 중복된 항목 제거는 실제로 삭제하는 단계, UNIQUE 함수는 원본을 유지하면서 결과를 확인하는 단계, AI 검토는 사람이 판단해야 할 애매한 항목을 찾아보는 단계로 생각하면 이해하기 쉽습니다.

5. 중복값을 지우기 전에 꼭 해둘 것

팁

중복값을 지우기 전에는 항상 원본 파일을 복사본으로 백업해두세요.

특히 "중복된 항목 제거"를 실행하기 전에 원본을 별도로 보관해두면, 삭제 범위를 잘못 잡았을 때 필요한 데이터를 다시 확인하기가 수월합니다.

중복 제거는 간단해 보이지만 한 번에 많은 행을 처리하기 때문에, 작업 전에 원본을 따로 보관해두는 습관이 좋습니다.

특히 거래처 목록이나 고객 명단처럼 다시 만들기 어려운 데이터라면, 삭제 작업보다 백업과 검토를 먼저 하는 순서가 중요합니다.

FAQ

Q1. 여러 열을 기준으로 중복을 확인하려면 어떻게 하나요?

A. "중복된 항목 제거" 창에서 기준으로 삼을 열을 모두 체크하면, 체크된 열의 값이 전부 같을 때 중복으로 처리됩니다. 따라서 어떤 열을 선택하느냐에 따라 결과가 달라질 수 있으므로 삭제 전에 체크 상태를 확인하는 것이 좋습니다.

 

Q2. 숫자로 된 데이터도 표기 차이로 중복이 안 잡히나요?

A. 네, 숫자를 텍스트로 입력한 셀과 숫자로 입력한 셀은 서로 다른 값으로 인식될 수 있어 별도로 형식을 통일해줘야 합니다.

 

Q3. 조건부 서식으로 표시된 색이 갑자기 사라졌어요.

A. 조건부 서식은 값에 따라 적용되는 규칙이기 때문에, 중복이던 셀 중 하나를 수정해서 더 이상 중복 조건에 해당하지 않게 되면 서식도 자동으로 해제될 수 있습니다.

 

오늘 다루고 계신 데이터 중에 "혹시 똑같은 걸 두 번 입력했나?" 싶은 목록이 있다면, 바로 지우기보다 조건부 서식으로 먼저 표시해보세요.

 

눈으로 확인하고 → 기본 기능으로 걸러내고 → 필요한 경우 AI로 애매한 항목을 검토하는 순서를 만들어두면 중복 데이터를 정리할 때 실수를 줄이는 데 도움이 됩니다.

 

함께 보면 좋은 글

• AI로 문서 두 개 비교하기: 수정된 조항과 달라진 숫자를 빠르게 찾는 법
• AI 기반 실무 생산성 혁신: 엑셀 데이터 분석 및 기획 보고서 작성 가이드

참고 자료

• Microsoft 고유 값 필터링 또는 중복 값 제거 공식 지원 문서 — https://support.microsoft.com/ko-KR/Excel/get-started/filter-for-unique-values-or-remove-duplicate-values

면책 조항

본 포스팅은 정보 제공을 목적으로 작성되었습니다. 사용 중인 엑셀 버전이나 데이터 구조에 따라 결과가 다를 수 있으니 실제 작업 전 원본 백업을 권장합니다.