셸 기반 - uniq 명령

유 닉 스 명령 은 텍스트 파일 의 중복 줄 을 제거 하 는 데 사 용 됩 니 다.
우선 모 르 는 점 이 있 으 시 면 말씀 해 주세요!!그날 이나 다음날 바로 답장 하고 개선 하 겠 습 니 다 ~
sort 와 유 니 크 를 보고 중복 줄 의 차 이 를 제거 합 니 다.

   sort -t: -k7 -u /etc/passwd    //去除passwd文件中域7重复的行
   cat /etc/passwd | uniq         //去除passwd文件中域7重复的行

区别1:
   sort 可以对指定的域进行排序并且去除重复行
   uniq 则不可以对某个相同的域进行去除，只能去除记录相同的行

区别2:
   sort 在排序之后进行去除，排序之后相同的记录都连续排序在一起
   uniq 去除重复行时只能对连续重复的记录进行去除，而不连续的则无法去除

유 니 크 명령 옵션 및 의미

   -c #打印每行在文本中重复出现的次数    -d #只显示有重复的记录，每个重复记录只出现一次    -u #只显示没有重复的记录

유 니 크 명령 예제:

打印出test文本中每行重复出现的次数
   #uniq -c test

只打印出test文本中重复的行
   #uniq -d test

只打印出test文本中不重复的行
   #uniq -u test

打印出test文本中重复的行出现的次数
   #uniq -cd test

打印出test文本中不重复的行出现的次数
   #uniq -cu test

sort 와 유 니 크 가 결 합 된 명령

统计出一个文件内每种单词出现的次数

count=1
err1=55
err2=56

#if检测用法是否错误
if [ $# -ne $count ]
then
   echo "Usage: script file"
   exit $err1
fi

#if检测是否对文件进行统计
if [ ! -f $! ]
then
   echo "File $1 not does found"
   exit $err2
fi

sort $1 | uniq -c | sort -nr   #将文件进行排序，然后去除重复并统计行个数，最后按照数字从大到小输出