소설 에서 자주 등장 하 는 인명 을 걸 러 내 는 작은 각본

#!/bin/sh
# name:filter_name.sh
# JH Gao 
# function:              
#       ：
#     
#         ，                ,      
#       3  
#                    
#         
#   ，  ，  100 

iconv -f GB18030 -t utf-8 $1 \
| sed 's/[、，“”      。！：？]/
/g' | sed 's/[[:space:]]*//g' | sed '/^$/d' \
| cut -nb 1-9 \
| grep -v -e '^$' -e [:\    \"                                                         ] -e '  ' -e 'http' -e '……' -e '  ' -e '  ' -e '  '  -e '  ' -e '  ' -e '  ' -e '  ' -e ' ' -e '  ' -e '  ' -e '  ' \
| sed '/^.\{1\}$/d' \
| sort | uniq -c | sort -k 1 -n -r | head -n 100

$ ./filter_name.sh     .txt
    596   
    564    
    532    
    528    
    461    
    358    
    351    
    323    
    297   
    293   
    265   
    257    
    249   
    232    
    211    
    203    
    174    
    160    
    159    
    156    
    143    
    140    
    139    
    137   
    136    
    123    
    119   
    113    
    108    
    106    
    105    
    103    
    101    
     91    
     90    
     90    
     89    
     89    
     89    
     87   
     86    
     84    
     84    
     83   
     83    
     83    
     81    
     81    
     78    
     78    
     77    
     73    
     73   
     72   
     72    
     71    
     71   
     71   
     70    
     69    
     68   
     67    
     67    
     67    
     67    
     67    
     66   
     66    
     62   
     61    
     60    
     55   
     54    
     54    
     53    
     53    
     53    
     52    
     52    
     51    
     51    
     51   
     50    
     50    
     50    
     49    
     49    
     49   
     49 」  
     49    
     49    
     48    
     47    
     47    
     47    
     46    
     45    
     45    
     44    
     43