uniq

生产应用：

https://i.cnblogs.com/EditPosts.aspx?opt=1

https://i.cnblogs.com/EditPosts.aspx?opt=1

取出域名并进行计数排序

方法：

awk -F "/" '{print $3}' aaa.txt |sort|uniq -c |sort -rn

或：

cut -d "/" -f 3  |sort|uniq -c |sort -rn

uniq -c 去除重复行并计数

uniq -u 只显示唯一的行

uniq -d 只显示重复的行