在 linux/unix 系統中,awk 是乙個功能強大的編輯工具,逐行讀取輸入文字,並根據指定的匹配模式進行查詢,對符合條件的內容進行格式化輸出或者過濾處理,可以在無互動的情況下實現相當複雜的文字操作,被廣泛應用於 shell 指令碼,完成各種自動化配置任務。
1.awk的命令格式如下:
1)awk 選項 『模式或條件 』 檔案1 檔案2… //過濾並且輸出檔案符合條件的內容
2)awk -f 指令碼檔案 檔案1 檔案2 … //從指令碼中呼叫編輯指令,過濾並且輸出內容
3)awk工具按列讀取資料,預設情況下字段的分隔符為空格或者tab鍵
4)awk執行的結果可以通過print的功能將字段資料列印顯示,且用$1,$2,$3…順序地表示行中的不同字段,此外$0表示整個行的記錄
5)不同的字段之間是通過指定的字元分隔,awk預設的分隔符是空格,awk允許在命令列中用「-f 分隔符」的形式來指定分隔符。
2.awk包含幾個特殊的內建變數(可直接用)如下所示:
fs:指定每行文字的字段分隔符,預設為空格或製表符(tab鍵)
nf:當前處理的行的字段個數
nr:當前處理的行的行號(序數)
$0:當前處理的行的整行內容
$n:當前處理行的第n個字段(第n列)
filename:被處理的檔名
rs:資料記錄分隔,預設為\n,即每行為一條記錄
1)按行輸入檔案:
awk '' test.txt
//輸出所有內容,等同於 cat test.txt
awk '' test.txt
//輸出所有內容,等同於 cat test.txt
awk 'nr= =1,nr==3' test.txt
//輸出第 1~3 行內容
awk '(nr>=1)&&(nr<=3)' test.txt
//輸出第 1~3 行內容
awk 'nr= =1||nr==3' test.txt
//輸出第 1 行、第 3 行內容
awk '(nr%2)==1' test.txt
//輸出所有奇數行的內容
awk '(nr%2)==0' test.txt
//輸出所有偶數行的內容
awk '/^root/' /etc/passwd
//輸出以root 開頭的行
awk '/nologin$/' /etc/passwd
//輸出以 nologin 結尾的行
awk 'begin ; /\/bin\/bash$/;end ' /etc/passwd
//統計以/bin/bash 結尾的行數,等同於 grep -c 「/bin/bash$」 /etc/passwd
awk 'begin;end /etc/squid/squid.conf
//統計以空行分隔的文字段落數
2) 按欄位輸出文字
awk '' test.txt
//輸出每行中(以空格或製表位分隔)的第 3 個字段
awk '' test.txt
//輸出每行中的第 1、3 個字段
awk -f ":" '$2==""『 /etc/shadow
//輸出密碼為空的使用者的shadow 記錄
awk 'begin ; $2==""' /etc/shadow
//輸出密碼為空的使用者的shadow 記錄
awk -f ":" '$7~"/bash"' /etc/passwd
//輸出以冒號分隔且第 7 個字段中包含/bash 的行的第 1 個字段
awk '($1~"nfs")&&(nf==8)』 /etc/services
//輸出包含 8 個字段且第 1 個字段中包含 nfs 的行的第 1、2 個字段
awk -f ":" '($7!="/bin/bash")&&($7!="/sbin/nologin")' /etc/passwd
//輸出第 7 個字段既不為/bin/bash 也不為/sbin/nologin 的所有行
3)通過管道、雙引號呼叫shell命令
awk -f: '/bash$/' /etc/passwd
//呼叫wc -l 命令統計使用bash 的使用者個數,等同於 grep -c 「bash$」 /etc/passwd
awk 'begin '
//呼叫hostname,並輸出當前的主機名
Linux shell正規表示式
符 轉義字元。例如 將邏輯否的!看做普通字元,使字元失去本身意義 符匹配字串開始的位置,即以。開頭 符匹配字串結束的位置,即以。結束 符匹配任意乙個字元 符匹配前面表示式0次或n次,即 號前面的字元可以重複0次或多次 a z 匹配a z中任意乙個字母 a z 匹配不在a z這幾個字元的任意字元 匹配...
Linux shell正規表示式 sort
sort工具是乙個以行為單位對檔案內容進行排序的工具,也可以根據不同的資料型別來排序。sort 命令的語法為 sort 選項 引數 其中常用的選項包括以下幾種 f 忽略大小寫 b 忽略每行前面的空格 m 按照月份進行排序 n 按照數字進行排序 r 反向排序 u 等同於 uniq,表示相同的資料僅顯示...
Linux shell 正規表示式用法
1 用法 用於關閉其後續字元的特殊含義,恢復字元的本身含義,如 表示字元 2 用法 匹配任意單個字元 3 用法 匹配任意字元,可以是單個,也可以是多個,和 字元的去吧是是否可以匹配多個任意字元 4 的用法 在行的起始處開始匹配緊接著的字元,如 6,匹配行的首字元為6的行。5 的用法 和 用法相似,表...