중복 줄 삭제

이 도구는 무엇을 하나

한 줄에 한 항목씩 들어 있는 목록에서 겹치는 줄을 지웁니다. 중요한 점은 원래 순서를 지킨다는 것입니다. 처음 나온 자리에 그대로 남고, 뒤에 나온 중복만 사라집니다.

중복 제거만 하는 것이 아니라 반대로도 쓸 수 있습니다. 중복된 줄만 남기면 어떤 항목이 겹쳤는지 확인할 수 있고, 한 번만 나온 줄만 남기면 두 목록의 차이를 찾을 수 있습니다.

이메일 주소, 상품 코드, 태그, 로그 항목처럼 한 줄이 하나의 값인 데이터에 씁니다.

사용법

1. 목록을 붙여넣습니다. 한 줄에 한 항목이어야 합니다.
2. 결과가 바로 나옵니다. 아래 요약에서 몇 개가 지워졌는지 확인합니다.
3. 대소문자를 다른 값으로 봐야 한다면 대소문자 구분을 켭니다.
4. 어떤 값이 겹쳤는지 알고 싶으면 두 번 이상 나온 줄만을 고릅니다.
5. 복사나 .txt 다운로드로 결과를 가져갑니다.

정렬까지 필요하다면 줄 정렬을 쓰세요. 정렬과 중복 제거를 한 번에 합니다.

무엇을 같은 줄로 보는가

두 줄이 같은지 판단하는 기준은 옵션에 따라 달라집니다.

• 앞뒤 공백 무시(기본 켜짐) — 사과와 사과 를 같은 줄로 봅니다. 스프레드시트에서 복사한 목록에는 이 옵션이 거의 항상 필요합니다.
• 대소문자 구분(기본 꺼짐) — 꺼져 있으면 Apple과 apple이 같습니다. 한글에는 영향이 없습니다.
• 빈 줄 유지(기본 꺼짐) — 꺼져 있으면 빈 줄은 결과에서 빠집니다.

남길 대상은 세 가지 중에 고릅니다.

• 고유한 줄 전부 — 보통의 중복 제거입니다. 각 값이 처음 나온 자리에 한 번씩 남습니다.
• 두 번 이상 나온 줄만 — 겹친 값이 무엇인지 확인할 때.
• 한 번만 나온 줄만 — 두 목록을 합쳐 넣으면 한쪽에만 있는 항목이 남습니다.

줄바꿈 형식은 세기 전에 통일합니다. 윈도에서 만든 파일과 맥에서 만든 파일이 섞여 있어도 같은 값은 같은 값으로 인식됩니다.

예시로 보기

이메일 목록 정리. 여러 곳에서 모은 이메일 주소를 붙여넣으면 중복 발송을 막을 수 있습니다. 대소문자 구분을 꺼 두면 [email protected]과 [email protected]을 같은 주소로 처리합니다. 실제로 대부분의 메일 시스템이 그렇게 다룹니다.

겹치는 값 찾기. 재고 목록에서 상품 코드가 중복 등록됐는지 확인하려면 두 번 이상 나온 줄만을 고르세요. 남은 줄이 곧 문제가 있는 코드입니다.

두 목록의 차이 찾기. 지난달 명단과 이번 달 명단을 이어 붙여 넣고 한 번만 나온 줄만을 고르면, 새로 들어왔거나 빠진 사람만 남습니다.

빈도 확인. 각 줄이 몇 번 나왔는지 표시를 켜면 항목 옆에 횟수가 붙습니다. 로그에서 어떤 오류가 가장 많이 났는지 볼 때 유용합니다.

이럴 때 씁니다

• 이메일·연락처 목록 정리. 중복 발송을 막습니다.
• 키워드 목록 정리. 여러 소스에서 모은 검색어를 합칠 때.
• 로그 분석. 어떤 오류 메시지가 반복되는지 셉니다.
• 데이터 검증. 고유해야 할 코드가 중복 등록됐는지 봅니다.
• 명단 비교. 두 목록의 차이를 찾습니다.
• 태그 정리. 같은 태그가 여러 표기로 들어갔는지 확인합니다.

개인정보와 보안

중복을 찾는 일은 브라우저 안에서 이루어집니다. 목록은 서버로 가지 않고 탭을 닫으면 사라집니다. 고객 이메일 주소나 사번처럼 민감한 목록도 안심하고 붙여넣어도 됩니다.

옵션 설정만 브라우저에 저장됩니다. 자세한 내용은 개인정보처리방침(영문)에 있습니다.