uniq
uniq命令可以去除排序过的文件中的重复行，因此uniq经常和sort合用。也就是说，为了使uniq起作用，所有的重复行必须是相邻的。
选项与参数：-i ：忽略大小写字符的不同；-c ：进行计数
-u ：只显示唯一的行
例：计算test.txt总共有多少行
新建test.txt文件
vim test.txt
uniq -c test.txt 得到11行，有2个相同的行被去掉
例：把test.txt排序后在去掉重复的行
sort test.txt |uniq -c
本文共 284 字，大约阅读时间需要 1 分钟。
uniq命令可以去除排序过的文件中的重复行，因此uniq经常和sort合用。也就是说，为了使uniq起作用，所有的重复行必须是相邻的。
选项与参数：-i ：忽略大小写字符的不同；-c ：进行计数
-u ：只显示唯一的行
例：计算test.txt总共有多少行
新建test.txt文件
vim test.txt
uniq -c test.txt 得到11行，有2个相同的行被去掉
例：把test.txt排序后在去掉重复的行
sort test.txt |uniq -c
转载于:https://blog.51cto.com/11937277/1880535