grep:正则表达式,文本过滤工具,能够实现以指定的"模式(Pattern)"逐行搜索文件中的内容,并将匹配到的行显示出来.
模式:是由正则表达式的元字符,其他字符组合起来的匹配字符。
每一类正则表达式本身的表达式是需要用户自己去写的,但表达式的元字符都有着固定的或者特定的意义,我们可以根据自己的需要去理解或者组合字符,生成我们需要的模式
| -v:显示不被模式匹配到的行,invert-match
-i:在做模式匹配的时候不区分大小写ignore-case -o:只显示匹配到的串,而非默认显示匹配到的行,only-matching -A 数字:A=after,显示到匹配到的行后,还显示每一个匹配项下面*行的内容 -B 数字:before,前*行 -C 数字:context,上下文*行 -E:扩展的正则表达式 |
例子：
| [root@lbg test]# grep -o 'root' /etc/passwd --只显示字段，不显示整行。
[root@lbg test]# grep -A 1 'root' /etc/passwd --显示该行和下一行内容 [root@lbg test]# grep -B 2 'root' /etc/passwd --显示该行和其前两行内容。 |
1.字符匹配( . [] [^] [:space:] [:punct:])
| . 匹配任意单个字符（制表符，空格，标点，字母，数 字，其他符号）
[] 匹配指定范围内的任意单个字符 [^] 指定范围外的单个字符 [:space:] 匹配空白字符,包括空格,tab, [:punct:] 标点符号（用法同空白字符） |
例子：
| [root@lbg test]# grep 'r[oa]t' /etc/passwd operator:x:11:0:operator:/root:/sbin/nologin sshd:x:74:74:Privilege-separated SSH:/var/empty/sshd:/sbin/nologin |
| * (贪婪模式) 做次数匹配,匹配*前面的字符0,1或多次,只表示次数,不表示字符
? 只做次数匹配,0或1次，写法是: \? {m,n} 最少m次,最多n次 写法为: \{m,n\} 用{m,n}时可以没有上限,但下限一定要有. 且 ?和{}都要加\. |
例子：
| [root@lbg test]# cat 1 ab a b a b a b [root@lbg test]# grep 'a b' 1 --匹配1个空格 a b [root@lbg test]# grep 'a *b' 1 --匹配0及以上的空格 ab a b a b a b a b [root@lbg test]# grep 'a \?b' 1 --匹配0或1个空格 ab a b [root@lbg test]# grep 'a \{2,3\}b' 1 ---匹配2或3个空格 a b a b [root@lbg test]# grep 'a \{2,\}b' 1 --匹配2个及以上空格 a b a b a b |
| \< 锚定词首 ####找到以r..t开头的内容 \
\> 锚定词尾 ### r..t\> ^ 脱字符 行首锚定 $ 行尾锚定 ##### root$ -->必须以root结尾 |
例子：
| [root@lbg test]# grep '\
root:x:0:0:root:/root:/bin/bash
operator:x:11:0:operator:/root:/sbin/nologin
[root@lbg test]# grep 'ot\>' /etc/passwd ---ot结尾的单词
root:x:0:0:root:/root:/bin/bash operator:x:11:0:operator:/root:/sbin/nologin setroubleshoot:x:993:988::/var/lib/setroubleshoot:/sbin/nologin [root@lbg test]# grep '^ro' /etc/passwd --以ro开头的行 root:x:0:0:root:/root:/bin/bash [root@lbg test]# grep 'bash$' /etc/passwd --以bash结尾的行 |
| [root@lbg test]# ls ---无文件 [root@lbg test]# touch a --创建文件a [root@lbg test]# cp /test/a{,1} --将a文件复制，并在其原路径下重命名为a1. [root@lbg test]# ls a a1 |
| wc [options]... file_name
-l 仅显示行数(line) -w 仅显示单词数(word) -c 仅显示字节数(char) 单独的wc显示的信息依次是：行数 单词数 字节数 文件名 |
例子：
| [root@lbg test]# cat a how do you do how do you do [root@lbg test]# wc a ---显示4种信息 2 8 28 a [root@lbg test]# wc -l a --显示行数 2 a [root@lbg test]# ls /test a b c d [root@lbg test]# ls /test | wc -l ----使用wc统计目录下文件的个数 4 |
| tr:转换字符或者删除字符（tr -d '字符集合' --delete ）
tr '集合1' '集合2' --将集合1里的内容按集合2对应位置的内容替换显示出来。 |
例子：
| [root@lbg test]# echo 'abcdabcd' |tr 'ac' '13' --两边集合一一对应的情况 1b3d1b3d [root@lbg test]# echo 'abcdabcd' |tr 'acd' '13' --集合1多于集合2的情况 1b331b33 [root@lbg test]# echo 'abcdabcd' |tr 'acd' '1234' --集合1少于集合2的情况 1b231b23 [root@lbg test]# echo 'abcdabcd' |tr 'a-z' 'A-Z' --大小写转换 ABCDABCD [root@lbg test]# echo 'abcdabcd' |tr -d 'ab' ---删除字符 cdcd |
| -c ：按照字符数量切 (characters)
-d :按指定分隔符切(delimiter 定界符) -f:指定要显示的字段 (file) 单个数字-->一个字段 逗号分隔的多个数字-->指定多个离散字段 - -->连续字段,3-5表示3到5字段 |
例子：
| [root@lbg test]# echo 'there are many dogs'|cut -d ' ' -f 2 --按空格切 are [root@lbg test]# echo 'there are many dogs'|cut -d ' ' -f 2,4 --第2个和第4个 are dogs [root@lbg test]# echo 'there are many dogs'|cut -d ' ' -f 2-4 --2到4个 are many dogs [root@lbg test]# echo 'there are many dogs'|cut -d m -f 1 --以m切割 there are [root@lbg test]# echo 'there are many dogs'|cut -d m -f 2 --以m切割 any dogs [root@lbg test]# echo 'how do you do'|cut -c 2-5 ---取第2到第5个字符 ow d |
| -f:忽略字符大小写(ignore-case)
-n:对数值进行排序 //Sort 默认字符排序 加,-n 数字排序. -r : 逆序输出 -t:指定分隔符 -k:基于哪个字段进行排序 (key) -u:uniq,重复的行只显示一行 (unique) |
例子：
| [root@lbg test]# cut -d : -f 3 /etc/passwd |sort -n [root@lbg test]# cat a 234 123 234 [root@lbg test]# sort -u a 123 234 [root@lbg test]# sort -n a 123 234 234 [root@lbg test]# sort -n -u a 123 234 |
9.uniq:去重复行。
| -c:统计每一行出现的次数（count)
-d:仅显示重复过的行 -u:仅显示未重复行 注意uniq去重,认定是连续的才是重复的.不是连续的不会去重. |
例子：
| [root@lbg test]# cat a 234 234 123 234 [root@lbg test]# uniq a 234 123 234 [root@lbg test]# sort a | uniq -c 1 123 3 234 [root@lbg test]# sort -u -n a 123 234 |
10.小括号向前引用功能
\1--引用从左到右的第一个括号内范围.
\2--引用从左到右的第二个括号内范围.
例子：
| [root@lbg test]# cat a he love his lover she like her liker [root@lbg test]# grep 'l..e.*e' a he love his lover she like her liker [root@lbg test]# grep '\(l..e\).*\1' a ---与命令grep 'l..e.*e' a相同 he love his lover she like her liker [root@lbg test]# grep '\(l\(..\)e\).*\1' a ---与命令grep 'l..e.*e' a相同 he love his lover she like her liker [root@lbg test]# grep 'l..e.*l..' a he love his lover she like her liker [root@lbg test]# grep '\(l\(..\)e\).*\2' a --与grep 'l..e.*l..' a 相同 he love his lover she like her liker |