vi/sed/awk/grep等工具皆使用正则表达式的语法规则。

正则表达式就是处理字符串的方法。

Linux三剑客 grep/awk/sed

grep

grep [-acinv] [--color=auto] '搜寻字符串' filename

选项与参数：

-a ：将 binary 档案以 text 档案的方式搜寻数据

-c ：计算找到 '搜寻字符串' 的次数

-i ：忽略大小写的不同，所以大小写视为相同

-n ：顺便输出行号

-v ：反向选择，亦即显示出没有 '搜寻字符串' 内容的那一行！

-s ：不输出错误信息。

-r ：嵌套搜索子目录。

-I ：不搜索二进制文件，等于binary-files=without-match

转义字符”\” ：表示字符为纯字符，不表示特殊含义。

中括号 [] ：搜寻字母数字符号等字符集合。

反向选择 [^] ：取反义。

行首字符 ‘^’ ：只有字符、字符串在行首列出现才为真。

grep -n '^the' regular_express.txt --- the在句首

grep -n '^[a-z]' regular_express.txt --- 小写字母在句首

grep -n '^[[:lower:]]' regular_express.txt --- 小写字母在句首

grep -n '^[^a-zA-Z]' regular_express.txt --- 句首不是字母

行尾字符 ‘&’ ：只有字符、字符串在句尾才为真。

grep -n '\.$' regular_express.txt ---  .在行尾，这里”\”为转义字符。

grep -n '^$' regular_express.txt --- 只有行首跟行尾空白行。

任意一个字符 . ：表示绝对有一个任意字符

grep -n 'g..d' regular_express.txt --- 搜寻g??d字符串。

重复字符* : 代表重复前一个字符0~无穷多次。

grep -n 'g*g' regular_express.txt --- 搜寻 包含一个g到n个g的字符串。红色部分表示0~无穷个g。

grep -n 'g.*g' regular_express.txt --- 搜寻g开头g结尾的字符串，但不能为gg。

限定连续重复字符的范围{} (\{ \}): 指定多少个重复字符的范围。

grep -n 'go\{2,5\}g' regular_express.txt --- 搜寻g+重复2~5次o+g

grep -n 'go\{2,\}g' regular_express.txt ---搜寻g+重复2~无穷大次o+g

总结上述语法如下：

sed

sed [-nefr] [动作]

选项与参数：

-n  ：使用安静(silent)模式。在一般 sed 的用法中，所有来自 STDIN 的数据一般都会被列出到屏幕上。

      但如果加上 -n 参数后，则只有经过 sed 特殊处理的那一行(或者动作)才会被列出来。

-e  ：直接在指令列模式上进行 sed 的动作编辑；

-f  ：直接将 sed 的动作写在一个档案内， -f filename 则可以执行 filename 内的 sed 动作；

-r  ：sed 的动作支持的是延伸型正规表示法的语法。(预设是基础正规表示法语法)

-i  ：直接修改读取的档案内容，而不是由屏幕输出。

动作说明：  [n1[,n2]]function

n1, n2 ：不见得会存在，一般代表『选择进行动作的行数』，举例来说，如果我的动作

         是需要在 10 到 20 行之间进行的，则『 10,20[动作行为] 』

function 有底下这些咚咚：

a   ：新增， a 的后面可以接字符串，而这些字符串会在新的一行出现(目前的下一行)～

c   ：取代， c 的后面可以接字符串，这些字符串可以取代 n1,n2 之间的行！

d   ：删除，因为是删除啊，所以 d 后面通常不接任何咚咚；

i   ：插入， i 的后面可以接字符串，而这些字符串会在新的一行出现(目前的上一行)；

p   ：打印，亦即将某个选择的数据印出。通常 p 会与参数 sed -n 一起运作～

s   ：取代，可以直接进行取代的工作哩！通常这个 s 的动作可以搭配正规表示法！

      例如 1,20s/old/new/g 就是啦！

以行为单位的新增/删除功能（仅显示，不修改原文件）：

nl /etc/passwd | sed '2,5d' --- 删除 2~5行

nl /etc/passwd | sed '2a drink tea' --- 在第二行末尾新增drink tea

nl /etc/passwd | sed '2i drink tea' --- 在第二行开头新增drink tea

以行为单位的取代与显示功能（仅显示，不修改原文件）：

nl /etc/passwd | sed '2,5c No 2-5 number' --- 将2~5行替换为No 2-5 number

nl /etc/passwd | sed -n '5,7p' --- 仅显示第5~7行

部分数据的搜寻并取代的功能

sed 's/要被取代的字符串/新的字符串/g'

/sbin/ifconfig eth0 | grep 'inet ' | sed 's/^.*inet //g' --- 替换句首为n个任意字符+inet为空。

/sbin/ifconfig eth0 | grep 'inet ' | sed 's/^.*inet //g'  | sed 's/ *Bcast.*$//g' | sed 's/^addr://g' ---1. 替换句首为n个任意字符+inet为空。

2. 替换句尾为 空格（n个）Bcast+任意字符为空。

3. 替换句首为addr：为空。

直接修改档案内容(危险动作)

sed 的『 -i 』选项可以直接修改档案内容。

awk

awk 也是一个非常棒的数据处理工具！相较于 sed 常常作用于一整个行的处理， awk 则比较倾向于一行当中分成数个『字段』来处理。因此，awk 相当的适合处理小型的数据数据处理呢！awk 通常运作的模式是这样的：

awk '條件類型1{動作1} 條件類型2{動作2} ...' filename

awk命令语法：

awk pattern { ACTION }

在awk读取文件的过程中中，变量$0保存整行的内容，变量$1保存第1个域的内容，$2保存第二个域的内容，…。

变量NF保存行包含的域的数量，因此变量$NF保存最后一个域的内容，$NF-1保存倒数第二个域的内容，…。

变量NR保存行的序号。

awk支持很多语句，待补完。