日期: 2023年11月 7日
awk
是處理文字檔案的乙個應用程式,幾乎所有 linux 系統都自帶這個程式。
它依次處理檔案的每一行,並讀取裡面的每乙個字段。對於日誌、csv 那樣的每行格式相同的文字檔案,awk
可能是最方便的工具。
awk
其實不僅僅是工具軟體,還是一種程式語言。不過,本文只介紹它的命令列用法,對於大多數場合,應該足夠用了。
awk
的基本用法就是下面的形式。
上面示例中,# 格式
$ awk 動作 檔名
# 示例
$ awk '' demo.txt
demo.txt
是awk
所要處理的文字檔案。前面單引號內部有乙個大括號,裡面就是每一行的處理動作print $0
。其中,print
是列印命令,$0
代表當前行,因此上面命令的執行結果,就是把每一行原樣列印出來。
下面,我們先用標準輸入(stdin)演示上面這個例子。
上面**中,$ echo 'this is a test' | awk ''
this is a test
print $0
就是把標準輸入this is a test
,重新列印了一遍。
awk
會根據空格和製表符,將每一行分成若干字段,依次用$1
、$2
、$3
代表第乙個字段、第二個字段、第三個字段等等。
上面**中,$ echo 'this is a test' | awk ''
a
$3
代表this is a test
的第三個字段a
。
下面,為了便於舉例,我們把/etc/passwd
檔案儲存成demo.txt
。
這個檔案的字段分隔符是冒號(root:x:0:0:root:/root:/usr/bin/zsh
daemon:x:1:1:daemon:/usr/sbin:/usr/sbin/nologin
bin:x:2:2:bin:/bin:/usr/sbin/nologin
sys:x:3:3:sys:/dev:/usr/sbin/nologin
sync:x:4:65534:sync:/bin:/bin/sync
:
),所以要用-f
引數指定分隔符為冒號。然後,才能提取到它的第乙個字段。
除了$ awk -f ':' '' demo.txt
root
daemon
binsys
sync
$ + 數字
表示某個字段,awk
還提供其他一些變數。
變數nf
表示當前行有多少個字段,因此$nf
就代表最後乙個字段。
$ echo 'this is a test' | awk ''
test
$(nf-1)
代表倒數第二個字段。
上面**中,$ awk -f ':' '' demo.txt
root /root
daemon /usr/sbin
bin /bin
sys /dev
sync /bin
print
命令裡面的逗號,表示輸出的時候,兩個部分之間使用空格分隔。
變數nr
表示當前處理的是第幾行。
上面**中,$ awk -f ':' '' demo.txt
1) root
2) daemon
3) bin
4) sys
5) sync
print
命令裡面,如果原樣輸出字元,要放在雙引號裡面。
awk
的其他內建變數如下。
awk
還提供了一些內建函式,方便對原始資料的處理。
函式toupper()
用於將字元轉為大寫。
上面**中,第乙個字段輸出時都變成了大寫。$ awk -f ':' '' demo.txt
root
daemon
binsys
sync
其他常用函式如下。
awk
內建函式的完整列表,可以檢視手冊。
awk
允許指定輸出條件,只輸出符合條件的行。
輸出條件要寫在動作的前面。
請看下面的例子。$ awk '條件 動作' 檔名
上面**中,$ awk -f ':' '/usr/ ' demo.txt
root
daemon
binsys
print
命令前面是乙個正規表示式,只輸出包含usr
的行。
下面的例子只輸出奇數行,以及輸出第三行以後的行。
下面的例子輸出第乙個字段等於指定值的行。# 輸出奇數行
$ awk -f ':' 'nr % 2 == 1 ' demo.txt
root
binsync
# 輸出第三行以後的行
$ awk -f ':' 'nr >3 ' demo.txt
syssync
$ awk -f ':' '$1 == "root" ' demo.txt
root
$ awk -f ':' '$1 == "root" || $1 == "bin" ' demo.txt
root
bin
awk
提供了if
結構,用於編寫複雜的條件。
上面**輸出第乙個欄位的第乙個字元大於$ awk -f ':' '' demo.txt
root
syssync
m
的行。
if
結構還可以指定else
部分。
$ awk -f ':' '' demo.txt
root
------
syssync
Linux命令 awk 入門教程
參考 阮一峰 佔小狼的部落格 2019 01 09 awk是處理文字檔案的乙個應用程式,幾乎所有 linux 系統都自帶這個程式。它依次處理檔案的每一行,並讀取裡面的每乙個字段。對於日誌 csv 那樣的每行格式相同的文字檔案,awk可能是最方便的工具。awk其實不僅僅是工具軟體,還是一種程式語言。不...
CSS入門教程
css是 cascading style sheets 的簡稱,中文翻譯為 串接樣式表 也有人翻譯為 樣式表 css用以作為網頁的排版和風格設計,在web標準建站中,對css的熟悉和使用是相當重要的乙個內容。css的作用是彌補html的不足,讓網頁的設計更為靈活。這個文章只是為您介紹css的基礎應用...
CSS入門教程
css是 cascading style sheets 的簡稱,中文翻譯為 串接樣式表 也有人翻譯為 樣式表 css用以作為網頁的排版和風格設計,在web標準建站中,對css的熟悉和使用是相當重要的乙個內容。css的作用是彌補html的不足,讓網頁的設計更為靈活。這個文章只是為您介紹css的基礎應用...