三劍客之sed，awk，grep，egrep

Sed是文本處理工具，依賴于正則表達式，可以讀取文本內容，根據指定條件對數據進行添加、刪除、替換等操作，廣泛應用于shell腳本，以完成自動化處理任務。
Sed在處理數據時默認不直接修改源文件，而是把當前處理的行存儲在臨時緩沖區中，所有指令都在緩沖區中操作，處理完成后，把緩沖區內容默認輸出到屏幕，接著處理下一行內容，這樣不斷重復，直到文件末尾，文件本身內容并沒有做任何改變。
一、Sed三大功能：
（1）讀?。簊ed 從輸入流（文件、管道、標準輸入）中讀取一行內容并存儲到臨時的緩沖區中；
（2）執行：默認情況下，所有的 sed 命令都在模式空間中順序地執行，除非指定了行的地址，否則 sed 命令將會在所有的行上依次執行；
（3）顯示：發送修改后的內容到輸出流，再發送數據后，模式空間將會被清空。
***注意：默認情況下，所有的 sed 命令都是在模式空間內執行的，因此輸入的文件并不會發生任何變化，除非是用重定向存儲輸出。
二、Sed命令兩種格式：
其中，“參數”是指操作的目標文件，當存在多個操作對象時用，文件之間用逗號“，”分隔；而 scriptfile 表示腳本文件，需要用“-f”選項指定，當腳本文件出現在目標文件之前時，表示通過指定的腳本文件來處理輸入的目標文件。

sed [選項] ‘操作’ 參數
sed [選項] -f scriptfile 參數

（1）常見的 sed命令選項：

-e ：表示用指定命令或者腳本來處理輸入的文本文件；
-f ：表示用指定的腳本文件來處理輸入的文本文件；
-h ：顯示幫助；
-n ：表示僅顯示處理后的結果；
-i ：直接編輯文本文件；

（2）常見的操作選項：

a：增加，在當前行下面增加一行指定內容；
c：替換，將選定行替換為指定內容；
d：刪除，刪除選定的行；
i ：插入，在選定行上面插入一行指定內容；
p：打印，如果同時指定行，表示打印指定行；如果不指定行，則表示打印所有內容，通常與 -n選項一起使用；
s ：替換，替換指定字符；
y ：字符轉換；

一、awk簡介：
在 Linux/UNIX 系統中，awk 是一個功能強大的編輯工具，逐行讀取輸入文本，并根據指定的匹配模式進行查找，對符合條件的內容進行格式化輸出或者過濾處理，可以在無交互的情況下實現相當復雜的文本操作，被廣泛應用于 Shell 腳本，完成各種自動化配置任務。
二、常見用法：
單引號加上大括號“{}”用于設置對數據進行的處理動作。awk 可以直接處理目標文件，也可以通過“-f”讀取腳本對目標文件進行處理。
awk 將文本文件中的一行視為一個記錄，而將一行中的某一部分（列）作為記錄中的一個字（域）。為了操作這些不同的字段，awk 借用 shell 中類似于位置變量的方法， 用$1、$2、$3…順序地表示行（記錄）中的不同字段。另外 awk 用$0 表示整個行（記錄）。不同的字段之間是通過指定的字符分隔。awk 默認的分隔符是空格。awk 允許在命令行中用“-F 分隔符”的形式來指定分隔符。

awk 【選項】‘模式或條件 {編輯指令}’ 文件1 文件2
awk -f 腳本文件 文件1 文件2
1）特殊的內建變量（可直接用）

FS：指定每行文本的字段分隔符，默認為空格或制表位（tab鍵）；
NF：當前處理的行的字段個數；
NR：當前處理的行的行號（序數）；
$0：當前處理的行的整行內容；
$n：當前處理行的第 n 個字段（第 n 列）；
FILENAME：被處理的文件名；
RS：數據記錄分隔，默認為\n，即每行為一條記錄；
（2）關系運算符號：只有當條件為真，才執行指定的動作。
大于（>）；小于（<）；大于等于（>=）；小于等于（<=）；
等于（==）、不等于（！=）；
&&（與）、||（或）、!（非）；
加（+）、減（-）、乘（*）、除（/）、取余（%）、乘方（^）；

一、grep命令

-n： 表示顯示行號
-i ： 表示不區分大小寫刷選
-v ： 表示方向查找

（1）查找特定的字符：
grep -n 'the' abc.txt //查找有the的行，并顯示出行號
1
grep -in ‘the’ abc.txt //不區分大小寫查找有the的行，并顯示行號
1
如果是想查找不包含the的行，-vn選項即可：
grep -vn ‘the’ abc.txt //查找不包括the的行，并顯示出行號
1
（2）中括號 [ ] 查找集合字符：
例如：當我們需要查找兩個字符 “aboyz” 和 “abiyz” 這兩個字符時，其中ab和yz都是相同的，可以利用 [ ]來匹配字符，[ ]中不論有幾個字符，都僅代表一個字符，
元字符