先来讲讲grep(搜索过滤)
1.命令格式：
grep [option] pattern file
2.命令参数：
-a 不要忽略二进制的数据
-A<显示行数> 除了显示符合范本样式的那一行之外，并显示该行之后的内容 grep -A 5 可以显示匹配内容以及后面的5行内容
-b 在显示符合样式的那一行之前，标示出该行第一个字符的编号
-B 显示行数 除了显示符合样式的那一行之外，并显示该行之前的内容 grep -B 5 可以显示匹配内容以及前面的5行内容
-c 计算符合样式的行数
-C<显示行数> 除了显示符合样式的那一行之外，并显示该行之前后的内容 grep -C 5 可以显示匹配内容以及前后面的5行内容
-d <动作> 当指定要查找的是目录而非文件时，必须使用这项参数，否则grep指令将回报信息并停止动作
-e<范本样式> 指定字符串做为查找文件内容的样式
-E 将样式为延伸的普通表示法来使用。
-f<规则文件> 指定规则文件，其内容含有一个或多个规则样式，让grep查找符合规则条件的文件内容，格式为每行一个规则样式
-F #将样式视为固定字符串的列表
-G 将样式视为普通的表示法来使用
-h #在显示符合样式的那一行之前，不标示该行所属的文件名称。
-H #在显示符合样式的那一行之前，表示该行所属的文件名称。
-i #忽略字符大小写的差别。
-l #列出文件内容符合指定的样式的文件名称。
-L #列出文件内容不符合指定的样式的文件名称。
-n #在显示符合样式的那一行之前，标示出该行的行数编号。
-q #不显示任何信息。
-r #此参数的效果和指定“-d recurse”参数相同。
-s #不显示错误信息。
-v #显示不包含匹配文本的所有行。
-V #显示版本信息。
-w #只显示全字符合的列。
-x #只显示全列符合的列。
-y #此参数的效果和指定“-i”参数相同
3.grep的正则表达式:
^ #锚定行的开始
$ #锚定行的结束
. #匹配一个非换行符的字符
* #匹配零个或多个先前字符
.* #一起用代表任意字符
[] #匹配一个指定范围内的字符
[^] #匹配一个不在指定范围内的字符
\(..\) #标记匹配字符
\< #锚定单词的开始
\> #锚定单词的结束
x\{m\} #重复字符x，m次
x\{m,\} #重复字符x,至少m次
x\{m,n\} #重复字符x，至少m次，不多于n次
\w #匹配字母和数字字符
\W #\w的反置形式，匹配一个或多个非单词字符
\b #单词锁定符
[:alnum:] #文字数字字符
[:alpha:] #文字字符
[:digit:] #数字字符
[:graph:] #非空字符（非空格、控制字符）
[:lower:] #小写字符
[:cntrl:] #控制字符
[:print:] #非空字符（包括空格）
[:punct:] #标点符号
[:space:] #所有空白字符（新行，空格，制表符）
[:upper:] #大写字符
[:xdigit:] #十六进制数字（0-9，a-f，A-F）
4. 扩展正则表达式 egrep 是 grep -E 的别名
＋， 于 . * 作用类似，表示 一个或多个重复字符。
?， 于 . * 作用类似，表示0个或一个字符。
｜，表示或关系，比如 'gd|good|dog' 表示有gd,good或dog的串
（），将部分内容合成一个单元组。 比如 要搜索 glad 或 good 可以这样 'g(la|oo)d'
eg:
查找指定进程： ps -ef|grep svn
查找指定进程个数： ps -ef|grep svn -c
搜索有the的行,并输出行号 grep -n 'the' regular_express.txt
从文件中读取关键词进行搜索： 输出test.txt文件中含有从test2.txt文件中读取出的关键词的内容行 cat test.txt | grep -f test2.txt
从文件中读取关键词进行搜索 且显示行号： cat test.txt | grep -nf test2.txt
从文件中查找关键词: grep 'linux' test.txt grep -n 'linux' test.txt 显示行号
从多个文件中查找关键词： grep 'linux' test.txt test2.txt
grep不显示本身进程： ps aux|grep ssh ps aux | grep ssh | grep -v "grep"
找出已u开头的行内容: cat test.txt | grep ^u
输出非u开头的行内容: cat test.txt |grep ^[^u]
输出ip地址: ifconfig eth0 | grep -E "([0-9]{1,3}\.){3}[0-9]"
显示包含ed或者at字符的内容行: cat test.txt |grep -E "ed|at"
显示当前目录下面以.txt 结尾的文件中的所有包含每个字符串至少有7个连续小写字符的字符串的行: grep '[a-z]\{7\}' *.txt 或 grep -E '[a-z]{7}' Test.txt
日志文件过大，不好查看，我们要从中查看自己想要的内容，或者得到同一类数据，比如说没有404日志信息的：grep '.' access1.log | grep -Ev '404' > access2.log
grep '.' access1.log|grep -Ev '404' > access2.log
grep '.' access1.log|grep -Ev '(404|/photo/|/css/)' > access2.log
grep '.' access1.log|grep -E '404' > access2.log
上面3句命令前面两句是在当前目录下对access1.log文件进行查找，找到那些不包含404的行，把它们放到access2.log中,后面去掉’v’,即是把有404的行放入access2.log
awk 匹配数字不能用\d