브라우저에서 바로 실행됩니다. 업로드도, 회원가입도 없습니다.

텍스트에서 중복 행을 제거하는 방법은?

위 상자에 텍스트를 붙여넣으면 중복된 행이 즉시 사라진다. 각 행의 첫 등장만 원래 순서 그대로 남는다. "대소문자 무시"나 "공백 제거" 옵션을 켜면 "Apple"과 "apple"처럼 비슷한 중복도 잡아낼 수 있다. 결과를 복사하면 끝. 어떤 데이터도 서버로 전송되지 않고, 처리는 전부 브라우저 안에서 이루어진다.

사용 방법

1행 붙여넣기. 여러 줄로 된 텍스트를 왼쪽 상자에 입력하거나 붙여넣는다. 한 줄에 하나씩. Windows, Mac, Unix 줄바꿈 방식 모두 지원된다.

2비교 방식 선택. 기본값은 완전 일치다. "대소문자 무시"를 켜면 "Apple"과 "apple"을 같은 행으로, "공백 제거"를 켜면 앞뒤 공백을 무시하고, "빈 행 제거"를 켜면 빈 줄을 모두 없앤다.

3정리된 목록 복사. 오른쪽에 중복이 제거된 텍스트가 실시간으로 표시되고, 상태 표시줄에 삭제된 중복 수가 나온다. "복사" 버튼을 누르면 클립보드로 바로 복사된다.

이런 분께 추천

SEO·마케팅 담당자가 여러 개의 겹치는 리포트에서 뽑아낸 키워드 목록, 백링크 URL, 이메일 주소를 정리할 때.

개발자·시스템 관리자가 로그 출력, 환경 변수 목록, .gitignore 형식 파일을 정리할 때. sort -u는 순서까지 바꿔버려서 부담스러울 때 대신 쓴다.

데이터 분석가가 붙여넣은 스프레드시트 열을 조회나 피벗 작업 전에 고유 값만 남길 때.

작가·연구자가 여러 문서에서 모은 참고 목록이나 브레인스토밍 메모를 하나의 깔끔한 목록으로 합칠 때.

이 도구는 입력하는 즉시 중복을 제거하지만 입력 상자의 원본은 절대 건드리지 않으므로, 옵션을 켜고 끄며 결과를 비교해도 원본이 사라지지 않는다. 기본적으로 두 행은 글자 하나까지 완전히 일치해야 중복으로 처리된다. 대소문자 무시를 켜면 Berlin과 berlin을 같은 행으로 취급한다. 공백 제거는 행 앞뒤의 공백이나 탭을 무시하는 옵션으로, 스프레드시트나 로그 파일에서 흔히 생기는 눈에 보이지 않는 중복까지 잡아낸다. 빈 행은 데이터가 아니라 구조로 취급되어 빈 행 제거를 켜지 않는 한 서로 합쳐지지 않는다. 모든 처리가 브라우저에서만 일어나므로 이메일 목록, 고객 데이터, 아직 공개되지 않은 키워드 리서치에도 안심하고 쓸 수 있다.

자주 묻는 질문

내 텍스트가 어딘가에 업로드되나요?

아니다. 중복 제거는 브라우저 안에서 자바스크립트로만 실행되며, 행 내용이 서버로 전송되는 일은 없다. 이메일 목록, 고객 데이터, 인증 정보가 담긴 파일처럼 아무 웹사이트 폼에나 붙여넣고 싶지 않은 데이터에도 안전하다.

이 중복 행 제거 도구는 무료인가요?

완전히 무료다. 가입도, 다운로드도, 사용 횟수 제한도 없다. 정적 페이지라서 로딩도 빠르고, 인터넷이 불안정해도 한 번 열어두면 계속 쓸 수 있다.

붙여넣을 수 있는 행 수에 제한이 있나요?

정해진 상한은 없다. 해시셋을 사용해 중복을 판별하므로 수십만 줄짜리 목록도 일반적인 노트북에서 1초도 안 걸려 처리된다. 실질적인 한계는 도구가 아니라 브라우저 메모리다.

중복이 여러 개면 처음 것이 남나요, 마지막 것이 남나요?

처음 것이 남는다. 도구는 위에서 아래로 훑으며 각 행의 첫 등장을 그 자리에 남기고 이후 등장은 모두 삭제하므로, 남은 순서는 붙여넣은 순서와 정확히 같다.

정렬 없이 중복 행만 제거할 수 있나요?

가능하다. 그게 바로 이 도구의 핵심이다. <code>sort -u</code> 같은 명령줄 방식은 먼저 정렬한 뒤 중복을 제거해서 순서가 있는 데이터를 뒤섞어 버린다. 이 도구는 원래 순서를 그대로 유지한 채 중복만 삭제한다.

빈 행은 어떻게 처리되나요?

빈 행은 데이터가 아니라 구조로 취급되므로 빈 줄 두 개가 하나로 합쳐지는 일은 없다. 빈 줄이 전혀 없는 목록을 원한다면 "빈 행 제거"를 켜면 되고, 그러면 비어 있거나 공백만 있는 줄이 모두 삭제된다.

공백이나 대소문자 차이만 있는 중복도 잡아내나요?

가능하다. "공백 제거"를 켜면 앞뒤 공백과 탭을 무시하고, "대소문자 무시"를 켜면 대소문자와 상관없이 일치시킨다. 둘 다 켜면 " Apple"과 "apple"은 같은 행으로 처리되지만, 실제로 남는 행은 붙여넣은 그대로 출력된다. 참고로 대소문자 무시 옵션은 목록에 섞인 영문 단어나 URL, 이메일 주소 같은 로마자 표기에 적용되는 기능이다.

Windows(CRLF) 줄바꿈도 지원하나요?

지원한다. Windows(\r\n), Unix(\n), 구형 Mac(\r) 줄바꿈 방식 모두 인식되며, 정리된 결과물은 표준 유닉스 줄바꿈으로 출력되어 어떤 에디터나 스프레드시트에 붙여넣어도 문제없이 인식된다.