uniq命令

时间:2023-03-09 05:47:35
uniq命令

bash&shell系列文章:http://www.cnblogs.com/f-ck-need-u/p/7048359.html


uniq是去重,不相邻的行不算重复值。

uniq [OPTION]... [INPUT [OUTPUT]]

选项说明:

-c:统计出现的次数(count)。

-d:只显示被计算为重复的

-D:显示所有被计算为重复的

-u:显示唯一值,即没有重复值的

-i:忽略大小写。

-z:在末尾使用\0,而不是换行符。

-f:跳过多少个字段(field)开始比较重复值。

-s:跳过多少个字符开始比较重复值。

-w:比较重复值时每行比较的最大长度。即对每行多长的字符进行比较。

示例:

[root@xuexi tmp]# cat uniq.txt

下面的命令删除了相邻的重复行,但是第一行111没有删除。

[root@xuexi tmp]# uniq uniq.txt

   # 删除了重复的111

排序后去重。

[root@xuexi tmp]# sort uniq.txt | uniq

使用-d显示重复的行。

[root@xuexi tmp]# sort uniq.txt | uniq  -d

使用-D显示所有重复过的行。

[root@xuexi tmp]# sort uniq.txt | uniq  -D

使用-u显示唯一行。

[root@xuexi tmp]# sort uniq.txt | uniq  -u

使用-c统计哪些记录出现的次数。

[root@xuexi tmp]# sort uniq.txt | uniq  -c  

使用-d -c统计重复行出现的次数。

[root@xuexi tmp]# sort uniq.txt | uniq  -d -c

-c不能和-D一起使用。结果说显示所有重复行再统计重复次数是毫无意义的行为。

[root@xuexi tmp]# sort uniq.txt | uniq  -D -c
uniq: printing all duplicated lines and repeat counts is meaningless
Try `uniq --help' for more information.