shell正则表达式

shell正则表达式

shell正则表达式

通常用于判断语句中，用来检查某一字 符串是否满足某一格式

正则表达式是由普通字符与元字符组成

普通字符包括大小写字母、数字、标点符号及一些其他符号

元字符是指在正则表达式中具有特殊意义的专用字符，可以用来规定其前导字符(即位于元字符前面的字符或表达式)在目标对象中的出现模式

基础正则表达式常见元字符: (支持的 工具: grep、egrep、 sed、awk)\ :转义字符，用于取消特殊符号的含义，例: \!、\n、\$等^ :匹配字符串开始的位置，例: ^a、 ^the、 ^#、^[a-z]

$ :匹配字符串结束的位置，例: word$、 ^$匹配空行

. :匹配除\n之外的任意的-一个字符，例: go.d、 g..d

**** :匹配前而子表达式0次或者多次，例: good、go. *d

[list] :匹配list列表中的一一个字符，例: go[ola]d, [abc]、 [a-z]、 [a-z0-9]、 [0-9]匹配任意一 位数字^list :匹配任意非list列表中的一一个字符，例: [^0-9]、 [^A-Z0-9]、 [^a-z]匹配任意- -位非小写字母\{n\} :匹配前而的子表达式n次，例: go{2}d、 '[0-9]{2} '匹配两位数字\{n,}\ :匹配前面的子表达式不少于n次，例: go{2,}d、 '[0-9]{2, } '匹配两位及两位以上数字\{n,m\} :匹配前面的子表达式n到m次，例: go{2,3}d、 '[0-9]{2, 3} '匹配两位到三位数字注: egrep、 awk使用{n}、{n,小 {n, m}匹配时“{}"前不用加“\”

扩展正则表达式元字符: (支持的工具: egrep、 awk )+: 匹配前面子表达式1次以上，例: go+d， 将匹配至少一个o， 如god、 good、 goood等?: 匹配前而子表达式0次或者1次，例: go?d， 将匹配gd或god(): 将括号中的字符串作为-一个整体，例1: g(oo)+d， 将匹配o整体1次以上，如good、gooood等|: 以或的方式匹配字条串，例: g (oo|a)d，将匹配good或者glad

sed编辑器sed是一种流编辑器，流编辑器会在编辑器处理数据之前基于预先提供的一-组规则来编辑数据流。sed编辑器可以根据命令来处理数据流中的数据，这些命令要么从命令行中输入，要么存储在一一个命 令文本文件中。

sed编辑器有2种寻址方式:1、以数字形式表示行区间2、用文本模式来过滤出行

sed的工作流程主要包括读取、执行和显示三个过程:●读取:sed从输入流(文件、管道、标准输入)中读取--行内容并存储到临时的缓冲区中(又称模式空间，patternspace)●执行:默认情况下，所有的sed命令都在模式空间中顺序地执行，除非指定了行的地址，否则sed命令将会在所有的行上依次执行。●显示:发送修改后的内容到输出流。在发送数据后，模式空间将会被清空。在所有的文件内容都被处理完成之前，上述过程将重复执行，直至所有内容被处理完。

在所有的文件内容都被处理完成之前，上述过程将重复执行，直至所有内容被处理完。注意:默认情况下所有的sed命令都是在模式空间内执行的，因此输入的文件并不会发生任何变化，除非是用重定向存储输出。

命令格式:sed -e '操作，文件1文件2 ...sed -n -e '操作'文件1文件2 ...sed -f脚本文件文件1文件2 ...sed -i -e '操作'文件1文件2 ...

sed -e 'n{操作1操作2

...

}' 文件1 文件2 ...

常用选项:-e ：或--expression=: 表示用指定命令来处理输入的文本文件，只有一-个操作命令时可省略，一 般在执行多个操作命令使用-f：或--file=:表示用指定的脚本文件来处理输入的文本文件。

-h：或--help: 显示帮助。-n： --quiet 或silent: 禁止sed编辑器输出，但可以与p命令- -起使用完成输出。-i： 直接修改目标文本文件。

常用操作:s: 替换，替换指定字符。d: 删除，删除选定的行。a: 增加，在当前行下面增加一-行指定内容。i: 插入，在选定行，上面插入一行指定内容。c: 替换，将选定行替换为指定内容。y: 字符转换，转换前后的字符长度必须相同。p: 打印，如果同时指定行，表示打印指定行:如果不指定行，则表示打印所有内容:如果有非打印字符，则以ASCII码输出。其通常与“-n”选项一起使用。=: 打印行号。l：(小写L):打印数据流中的文本和不可打印的ASCII字符( 比如结束符$、制表符\t)

打印内容:

sed -n -e 'p' testfile1sed -n -e '=' testfile1sed -n -e 'l' testfile1

sed -n -e '=;p' testfile1sed -n -e '=' -e 'p' testfile1

sed -n'

》=》P》' testfile1

使用地址:sed编辑器有2种寻址方式:1、以数字形式表示行区间2、用文本模式来过滤出行

sed -n '1p' testfile1sed -n '$p' testfile1sed -n '1, 3p' testfilelsed -n '3,$p' testfilel

sed -n '1, +3p' testfilel #打印1之后的连续3行，即1-4行sed '5q' testfile1 #打印前5行信息后退出，q表示退出sed -n 'p;n' testfile1 #打印奇数行; n表示移动到下一行sed -n 'n;p' testfile1 #打印偶数行

sed -n ' /user/p' /etc/ passwdsed -n '/^a/p' /etc/passwdsed -n ' /bash$/p' /etc/passwd .sed -n ' /ftp\l root/p' /etc/passwdsed -n '2, /nobody/p'sed -n '2, /nobody/=' /etc/passwdsed -nr '/ro{1, }t/p' /etc/passwd #-r表示支持扩展正则表达式

删除行:sed 'd' testfilel #全删sed '3d' testfile1sed '2,4d' testfile1

sed '$d' testfile1sed ' /^$/d' testfilel #删除空行

sed ' /nologin$/d' /etc/ passwdsed ' /nologin$/!d' /etc/passwd #"!”表示取反操作

sed ' /2/,/3/d' testfile2 #从第-一个位置打开行删除功能，到第二个位置关闭行删除功能sed '/1/,/3/d' testfile2

替换:行范围s/旧字符串/新字符串/替换标记4种替换标记:数字:表明新字符串将替换第几处匹配的地方g:表明新字符串将会替换所有匹配的地方P:打印与替换命令匹配的行，与-n-起使用w文件:将替换的结果写到文件中

sed -n 's/root/admin/p' /etc/passwdsed -n 's/root/admin/2p' /etc/passwdsed -n 's/root/ admin/gp' /etc/ passwdsed 's/root//g' /etc/passwdsed '1,20 s/^/#/' /etc/passwdsed '/^root/ s/$/#/' /etc/passwdsed -rn 's/. root. /#&/p' /etc/passwd

sed -f script.sed testfile2

sed '1,20w out. txt' /etc/passwdsed '1,20 s/^/#/w out. txt' /etc/passwd

sed -n 's/\/bin\/bash/\/bin\/csh/p' /etc/passwdsed -n 's! /bin/bash! /bin/csh!p' /etc/passwd #使用“!”作为字符串分隔符sed -i 's9\945\9\99\98\939g' test. txt #将94599替换为9893

插入:sed ' /45/c ABC' testfile2sed ' /45/ y/145/AB/' testfile2 #使所有的1字符转换成A，所有的2字符转换成B，所有的3字符转换成Csed '1,3a ABC' testfile2

sed '1,3a ABC' testfile2sed '1i ABC' testfile2sed '5r /etc/resolv.conf' testfile2sed ' /root/{H;d};$G' /etc/passwd #将包含root的行剪切到末尾，H表示复制到剪切板，G表示粘贴到指定行后sed '1,2H;3,4G' /etc/passwd #将1、2行复制到3和4行的下而

echo "111222333" 1 sed -r 's/(111) (222)/\2\1/' #将字符 111和222互换位置echo "111222333" 1 sed -r 's/^(.) (.*) (.)$/\3\2\1/' #将第-一个字符和最后-一个字符互换

awk工作原理:逐行读取文本，默认以空格或tab键为分隔符进行分隔，将分隔所得的各个字段保存到内建变量中，并按模式或者条件执行编辑命令。

sed命令常用于一整行的处理，而awk比较倾向于将一行分成多个“字段”然后再进行处理。awk信息的读入也是逐行读取的，执行结果可以通过print的功能将字段数据打印显示。在使用awk命令的过程中,可以使用逻辑操作符“&&"表示"与”、“11"表示“或”、“!"表示“非”; 还可以进行简单的数学运算，如+、-、*、1、号、^分别表示加、减、乘、除、取余和乘方。

命令格式:awk选项'模式或条件{操作}，文件1 文件2...awk -f 脚本文件文件1文件2 ...

awk常见的内建变量(可直接用)如下所示:FS: 列分割符。指定每行文本的字段分隔符，默认为空格或制表位。与"-F"作用相同NF:当前处理的行的字段个数。NR: 当前处理的行的行号(序数)$0:当前处理的行的整行内容。$n: 当前处理行的第n个字段(第n列)。FILENAME:被处理的文件名。.RS:行分隔符。awk从文件上读取资料时,将根据RS的定义把资料切割成许多条记录,而awk-次仅读入一条记录,以进行处理。预设值是'\n'

按行输出文本:awk '{print}' testfile2 #输出所有内容awk '{print $0}' testfile2 #输出所有内容

awk 'NR==1, NR==3{print}' testfile2 #输出第1~3行内容awk ' (NR>=1)&& (NR<=3) {print}' testfile2 #输出第1~3行内容

版权声明：本文内容由网络用户投稿，版权归原作者所有，本站不拥有其著作权，亦不承担相应法律责任。如果您发现本站中有涉嫌抄袭或描述失实的内容，请联系我们jiasou666@gmail.com 处理，核实后本网站将在24小时内删除侵权内容。