Linux 에서 텍스트 의 중복 줄 을 삭제 하 는 방법
첫째, sort + uniq 로, 단순 uniq 는 안 됩 니 다.
shell> sort -k2n file | uniq
여기 서 저 는 간단 한 테스트 를 했 습 니 다. file 의 중복 줄 이 더 이상 함께 있 지 않 을 때 유 니 크 는 서 비 스 를 모든 중복 줄 을 삭제 합 니 다.정렬 을 거 친 후 모든 같은 줄 이 인접 해 있 기 때문에 unqi 는 중복 줄 을 정상적으로 삭제 할 수 있 습 니 다.
둘째, sort + awk 명령 으로 주의 하 세 요. 단순 awk 역시 안 됩 니 다. 원인 은 같 습 니 다.
shell> sort -k2n file | awk '{if ($0!=line) print;line=$0}'
물론 파이프 뒤의 코드 를 다시 설계 해 보 세 요. sort 명령 이 필요 없 을 수도 있 습 니 다.
셋째, sort + sed 명령 으로 정렬 명령 이 필요 합 니 다.
shell> sort -k2n file | sed '$!N; /^.∗
\1$/!P; D'
마지막 으로 sort 로 정렬 해 야 하 는 텍스트 의 예 를 첨부 합 니 다. 물론 이 정렬 해 야 하 는 이 유 는 간단 합 니 다. 바로 뒤의 알고리즘 을 디자인 할 때의 '국부 성' 입 니 다. 같은 줄 은 서로 다른 구역 에 분산 되 어 나타 날 수 있 습 니 다. 새로운 같은 줄 이 나타 나 면 앞 에 있 는 기록 이 덮어 집 니 다. 이 예 를 보면 이해 하기 쉽 습 니 다. ffffffffffffffffffffffffffffffffffffeeeeeeeeeeeeeeeeeeeefffffffffffffffffffeeeeeeeeeeeeeeeeeeeeeeeeeeeeeeeeeeeeeeeegggggggggggggggggggg
사실 이것 은 제 가 마음대로 넣 은 몇 줄 의 글자 입 니 다. sort 를 사용 해 야 하 는 좋 은 예 라 고 생각 하지 못 했 습 니 다. 여러분 이 직접 해 보 세 요.
이 내용에 흥미가 있습니까?
현재 기사가 여러분의 문제를 해결하지 못하는 경우 AI 엔진은 머신러닝 분석(스마트 모델이 방금 만들어져 부정확한 경우가 있을 수 있음)을 통해 가장 유사한 기사를 추천합니다:
다양한 언어의 JSONJSON은 Javascript 표기법을 사용하여 데이터 구조를 레이아웃하는 데이터 형식입니다. 그러나 Javascript가 코드에서 이러한 구조를 나타낼 수 있는 유일한 언어는 아닙니다. 저는 일반적으로 '객체'{}...
텍스트를 자유롭게 공유하거나 복사할 수 있습니다.하지만 이 문서의 URL은 참조 URL로 남겨 두십시오.
CC BY-SA 2.5, CC BY-SA 3.0 및 CC BY-SA 4.0에 따라 라이센스가 부여됩니다.