文本处理时，经常要删除重复行

 

文本处理时，经常要删除重复行，下面是三种方法

第一，用sort+uniq，注意，单纯uniq是不行的。
sort -n test.txt | uniq