목록과 로그의 순서를 잃지 않고 중복 줄 제거하기

문제 상황

합친 내보내기 파일과 복사한 로그에는 완전히 같은 줄, 대소문자 변형, 눈에 잘 안 보이는 앞뒤 공백, 혼합 줄바꿈이 함께 들어옵니다. 규칙 없이 중복을 지우면 서로 다른 식별자를 합치거나 공백을 예상과 다르게 남기고, 너무 일찍 정렬해 시간 순서까지 잃을 수 있습니다.

이럴 때 사용하세요

• 스프레드시트 열이나 내보낸 목록에 ID, 이메일 주소, 라벨, URL이 반복될 때
• 허용 목록, 차단 목록, 호스트명, 설정 조각 여러 개를 하나의 고유 목록으로 합칠 때
• 로그에 같은 메시지가 반복되지만 첫 등장 순서는 유지해야 할 때
• 사람이 편집한 줄이 대소문자나 앞뒤 공백만 달라 명시적인 비교 규칙이 필요할 때
• 숨은 스프레드시트 처리 대신 전후 개수와 정확한 텍스트 다운로드가 필요할 때

단계

1. 1단계

   원본 블록 보관

   수정하지 않은 사본을 남기고 순서, 대소문자, 들여쓰기, 마지막 줄바꿈이 대상 시스템에서 의미가 있는지 기록합니다.

2. 2단계

   무관한 빈 줄은 별도로 제거

   빈 줄이 잡음이면 빈 줄 제거 도구로 먼저 정리합니다. 중복 제거는 빈 줄도 실제 비교 값으로 보고 하나를 남깁니다.

3. 3단계

   대소문자 규칙 선택

   AbC1과 abc1이 다른 기계 식별자라면 정확한 비교를 켭니다. 표기만 다른 사람용 라벨이면 끈 상태를 사용합니다.

4. 4단계

   공백 규칙 선택

   앞뒤 공백이 실수일 때만 공백 무시를 켭니다. 결과의 첫 번째 원문 줄 자체는 trim되지 않습니다.

5. 5단계

   로그는 원래 순서 유지

   시간, 우선순위, 첫 등장 순서가 중요하면 정렬을 끕니다. 각 비교 키의 첫 번째 줄이 원래 순서로 남습니다.

6. 6단계

   실행 후 진단 확인

   원본, 고유, 제거, 중복 그룹 개수를 비교하고 비교 옵션으로 합쳐진 원문 경고와 혼합 줄바꿈 통일 알림을 읽습니다.

7. 7단계

   검증 후 내보내기

   대소문자, 공백, Unicode 조합이 다른 값을 표본 확인한 뒤 정확한 결과를 복사하거나 다운로드하고 대상 시스템에서 시험합니다.

예시

BUG-104
bug-104
BUG-208
BUG-315
BUG-208
BUG-401

대소문자 무시, 정렬 끔:
BUG-104
BUG-208
BUG-315
BUG-401

원본: 6 | 고유: 4 | 제거: 2

흔한 실수

자주 묻는 질문