linux shell 字符串常用操作

时间:2021-11-30 13:58:38

1.shell内置的字符串操作

表达式 含义
${#string} $string的长度
${string:position} string中,从位置$position开始提取字符串
${string:position:length} string中,从位置$position开始提取长度为length的字符串
${string#substring} string中,从头开始匹配substring(最短匹配)并删除,如果没匹配则输出string
${string##substring} string中,从头开始匹配substring(最长匹配)并删除,如果没匹配则输出string
${string%substring} 从string结尾开始匹配(最短匹配)并删除,如果没匹配则输出string
${string%%substring} 从string结尾开始匹配(最长匹配)并删除,如果没匹配则输出string
${string/substring/replacement} 使用replacement替代第一个substring
${string//substring/replacement} 使用replacement替代所有sbustring
${string/#substring/replacement} 如果string的前缀匹配substring,那么用replacement替换substring
${string/%substring/replacement} 如果string的后缀匹配substring,那么用replacement替换substring


字符串删除功能: #号代表从开头匹配,%代表从结尾,两个#或者%代表最长匹配

字符串替换功能:一个/代表替换第一个,//则代表全部替换, /#则是开头匹配,/%是结尾匹配

2.awk使用

awk 内置变量包括:

  • FILENAME : 当前输入文件名称
  • NR : 当前输入行编号(是指输入行 1,2,3……等)
  • NF : 当前输入行的字段编号
  • OFS : 输出字段分隔符
  • FS : 输入字段分隔符
  • ORS : 输出记录分隔符
  • RS : 输入记录分隔符

3.sed 使用

sed是一个很好的文件处理工具,本身是一个管道命令,主要是以行为单位进行处理,可以将数据行进行替换、删除、新增、选取等特定工作。
sed命令行格式为:
         sed [-nefri] ‘command’ 输入文本

常用选项:
        -n∶使用安静(silent)模式。在一般 sed 的用法中,所有来自 STDIN的资料一般都会被列出到萤幕上。但如果加上 -n 参数后,则只有经过sed 特殊处理的那一行(或者动作)才会被列出来。
        -e∶直接在指令列模式上进行 sed 的动作编辑;
        -f∶直接将 sed 的动作写在一个档案内, -f filename 则可以执行 filename 内的sed 动作;
        -r∶sed 的动作支援的是延伸型正规表示法的语法。(预设是基础正规表示法语法)
        -i∶直接修改读取的档案内容,而不是由萤幕输出。

常用命令:
        a   ∶新增, a 的后面可以接字串,而这些字串会在新的一行出现(目前的下一行)~
        c   ∶取代, c 的后面可以接字串,这些字串可以取代 n1,n2 之间的行!
        d   ∶删除,因为是删除啊,所以 d 后面通常不接任何咚咚;
         i   ∶插入, i 的后面可以接字串,而这些字串会在新的一行出现(目前的上一行);
         p  ∶列印,亦即将某个选择的资料印出。通常 p 会与参数 sed -n 一起运作~         s  ∶取代,可以直接进行取代的工作哩!通常这个 s 的动作可以搭配正规表示法!例如 1,20s/old/new/g 就是啦!

例如文件:ylj,注意选项和命令的位置

删除某行,命令在与
     [root@localhost home] # sed '1d' ylj              #删除第一行 
     [root@localhost home] # sed '$d' ylj              #删除最后一行
     [root@localhost home] # sed '1,2d' ylj           #删除第一行到第二行
     [root@localhost home] # sed '2,$d' ylj           #删除第二行到最后一行

  显示某行
.    [root@localhost home] # sed -n '1p' ylj           #显示第一行 
     [root@localhost home] # sed -n '$p' ylj           #显示最后一行
     [root@localhost home] # sed -n '1,2p' ylj        #显示第一行到第二行
     [root@localhost home] # sed -n '2,$p' ylj        #显示第二行到最后一行

  使用模式进行查询
     [root@localhost home] # sed -n '/home/p' ylj    #查询包括关键字home所在所有行
     [root@localhost home] # sed -n '/\$/p' ylj        #查询包括关键字$所在所有行,使用反斜线\屏蔽特殊含义

  增加一行或多行字符串
     [root@localhost home]# cat ylj
     Hello!
     home is me,welcome to my blog.
     end
     [root@localhost home] # sed '1a drink tea' ylj  #第一行后增加字符串"drink tea"
     Hello!
     drink tea
     home is me,welcome to my blog. 
     end
     [root@localhost home] # sed '1,3a drink tea' ylj #第一行到第三行后增加字符串"drink tea"
     Hello!
     drink tea
     home is me,welcome to my blog.
     drink tea
     end
     drink tea
     [root@localhost home] # sed '1a drink tea\nor coffee' ylj   #第一行后增加多行,使用换行符\n
     Hello!
     drink tea
     or coffee
     home is me,welcome to my blog.
     end

  代替一行或多行
     [root@localhost home] # sed '1c Hi' ylj                #第一行代替为Hi
     Hi
     home is me,welcome to my blog.
     end
     [root@localhost home] # sed '1,2c Hi' ylj             #第一行到第二行代替为Hi
     Hi
     end

  替换一行中的某部分
  格式:sed 's/要替换的字符串/新的字符串/g'   (要替换的字符串可以用正则表达式)
     [root@localhost home] # sed -n '/home/p' ylj | sed 's/home/bird/g'    #替换home为bird
   [root@localhost home] # sed -n '/home/p' ylj | sed 's/home//g'        #删除home

插入
     [root@localhost home] # sed -i '$a bye' ylj         #在文件ylj中最后一行直接输入"bye"
     [root@localhost home]# cat ylj
     Hello!
     home is me,welcome to my blog.
     end
     bye

删除匹配行

sed -i '/匹配字符串/d'  filename  (注:若匹配字符串是变量,则需要“”,而不是‘’。记得好像是)

替换匹配行中的某个字符串

sed -i '/匹配字符串/s/替换源字符串/替换目标字符串/g' filename