linux学习笔记---grep

时间:2024-07-15 09:37:44

先来讲讲grep(搜索过滤)

1.命令格式:

    grep [option] pattern file

2.命令参数:

-a 不要忽略二进制的数据

-A<显示行数>          除了显示符合范本样式的那一行之外,并显示该行之后的内容    grep -A 5 可以显示匹配内容以及后面的5行内容

-b                          在显示符合样式的那一行之前,标示出该行第一个字符的编号

-B 显示行数             除了显示符合样式的那一行之外,并显示该行之前的内容   grep -B 5 可以显示匹配内容以及前面的5行内容

-c            计算符合样式的行数

-C<显示行数>          除了显示符合样式的那一行之外,并显示该行之前后的内容  grep -C 5 可以显示匹配内容以及前后面的5行内容

-d <动作>       当指定要查找的是目录而非文件时,必须使用这项参数,否则grep指令将回报信息并停止动作

-e<范本样式>        指定字符串做为查找文件内容的样式

-E          将样式为延伸的普通表示法来使用。

-f<规则文件>           指定规则文件,其内容含有一个或多个规则样式,让grep查找符合规则条件的文件内容,格式为每行一个规则样式

-F           #将样式视为固定字符串的列表

-G          将样式视为普通的表示法来使用

-h           #在显示符合样式的那一行之前,不标示该行所属的文件名称。

-H           #在显示符合样式的那一行之前,表示该行所属的文件名称。

-i            #忽略字符大小写的差别。

-l            #列出文件内容符合指定的样式的文件名称。

-L           #列出文件内容不符合指定的样式的文件名称。

-n           #在显示符合样式的那一行之前,标示出该行的行数编号。

-q             #不显示任何信息。

-r           #此参数的效果和指定“-d recurse”参数相同。

-s           #不显示错误信息。

-v           #显示不包含匹配文本的所有行。

-V           #显示版本信息。

-w           #只显示全字符合的列。

-x           #只显示全列符合的列。

-y           #此参数的效果和指定“-i”参数相同

3.grep的正则表达式:

^  #锚定行的开始

$  #锚定行的结束

.  #匹配一个非换行符的字符

*  #匹配零个或多个先前字符

.*   #一起用代表任意字符

[]   #匹配一个指定范围内的字符

[^]  #匹配一个不在指定范围内的字符

\(..\)  #标记匹配字符

\<      #锚定单词的开始

\>      #锚定单词的结束

x\{m\}  #重复字符x,m次

x\{m,\}  #重复字符x,至少m次

x\{m,n\}  #重复字符x,至少m次,不多于n次

\w    #匹配字母和数字字符

\W    #\w的反置形式,匹配一个或多个非单词字符

\b    #单词锁定符

[:alnum:]    #文字数字字符

[:alpha:]    #文字字符

[:digit:]    #数字字符

[:graph:]    #非空字符(非空格、控制字符)

[:lower:]    #小写字符

[:cntrl:]    #控制字符

[:print:]    #非空字符(包括空格)

[:punct:]    #标点符号

[:space:]    #所有空白字符(新行,空格,制表符)

[:upper:]    #大写字符

[:xdigit:]   #十六进制数字(0-9,a-f,A-F)

4. 扩展正则表达式  egrep 是 grep -E 的别名

+, 于 . * 作用类似,表示 一个或多个重复字符。 
?, 于 . * 作用类似,表示0个或一个字符。 
|,表示或关系,比如 'gd|good|dog' 表示有gd,good或dog的串 
(),将部分内容合成一个单元组。 比如 要搜索 glad 或 good 可以这样 'g(la|oo)d'

eg:

查找指定进程: ps -ef|grep svn

查找指定进程个数: ps -ef|grep svn -c

搜索有the的行,并输出行号  grep -n 'the' regular_express.txt

从文件中读取关键词进行搜索: 输出test.txt文件中含有从test2.txt文件中读取出的关键词的内容行   cat test.txt | grep -f test2.txt

从文件中读取关键词进行搜索 且显示行号: cat test.txt | grep -nf test2.txt

从文件中查找关键词: grep 'linux' test.txt    grep -n 'linux' test.txt 显示行号

从多个文件中查找关键词: grep 'linux' test.txt test2.txt

grep不显示本身进程: ps aux|grep ssh     ps aux | grep ssh | grep -v "grep"

找出已u开头的行内容:  cat test.txt | grep ^u

输出非u开头的行内容: cat test.txt |grep ^[^u]

输出ip地址:  ifconfig eth0 | grep -E "([0-9]{1,3}\.){3}[0-9]"

显示包含ed或者at字符的内容行: cat test.txt |grep -E "ed|at"

显示当前目录下面以.txt 结尾的文件中的所有包含每个字符串至少有7个连续小写字符的字符串的行:  grep '[a-z]\{7\}'  *.txt   或  grep -E '[a-z]{7}'  Test.txt

日志文件过大,不好查看,我们要从中查看自己想要的内容,或者得到同一类数据,比如说没有404日志信息的:grep '.' access1.log | grep -Ev '404' > access2.log

grep '.' access1.log|grep -Ev '404' > access2.log

grep '.' access1.log|grep -Ev '(404|/photo/|/css/)' > access2.log

grep '.' access1.log|grep -E '404' > access2.log

上面3句命令前面两句是在当前目录下对access1.log文件进行查找,找到那些不包含404的行,把它们放到access2.log中,后面去掉’v’,即是把有404的行放入access2.log

awk 匹配数字不能用\d