awk 多檔案操作2種實現方法

2021-06-23 07:58:06 字數 2306 閱讀 5840

我們經常會將2個有關聯文字檔案進行合併處理。分別從不同檔案獲取需要的列,然後,整體輸出到一起。awk進行多檔案處理時候,常常會遇到2個方面問題,第乙個是怎麼樣合併多個檔案為乙個檔案。第二個問題就是怎麼樣將多行合併為一行顯示。我這裡說下我的處理2種方法,還有實現思路。

例項文字:

[chengmo@centos5 shell]$ awk 'fnr==1' a.txt b.txt           

a.txt

100 wang man

200 wangsan woman

300 wangming man

400 wangzheng man

b.txt

100 90 80

200 80 70

300 60 50

400 70 20

需要合併得到結果:

100     wang    man 90  80

200 wangsan woman 80    70

300 wangming man 60     50

400 wangzheng man 70    20

awk多檔案操作方法一:

實現思路:

通過外部命令合併檔案,然後通過排序,然後通過awk進行合併操作。

首先:

[chengmo@centos5 shell]$ cat a.txt b.txt | sort -n -k1 |awk ''

100 90 80

100 wang man

200 80 70

200 wangsan woman

300 60 50

300 wangming man

400 70 20

400 wangzheng man

awk 多行合併【next 使用介紹】(常見應用4)

繼續:

[chengmo@centos5 shell]$  cat a.txt b.txt | sort -n -k1 |awk  'nr%2==1'    

100 wang man 90 80

200 wangsan woman 80 70

300 wangming man 60 50

400 wangzheng man 70 20

需要把幾行合併,經常用到方法是:nr%num 然後將行值儲存下來,next該行。在輸出時候列印出來。

awk多檔案操作方法二

實現思路

不借助第3放工具開啟,直接通過awk 開啟多個檔案。然後可以通過:filename獲得當前處理檔名。nr總記錄 fnr當前檔案記錄,以及argc傳入引數總數,argv是陣列,各個引數值。

看下這些例項:

[chengmo@centos5 shell]$ awk 'begin' a.txt b.txt                      

3 awk a.txt b.txt

a.txt 1 1 100 wang man

a.txt 2 2 200 wangsan woman

a.txt 3 3 300 wangming man

a.txt 4 4 400 wangzheng man

b.txt 5 1 100 90 80

b.txt 6 2 200 80 70

b.txt 7 3 300 60 50

b.txt 8 4 400 70 20

程式**:

[chengmo@centos5 shell]$ awk '

begin

file="";

}end

}}' a.txt b.txt

100 wang man 90 80

200 wangsan woman 80 70

300 wangming man 60 50

400 wangzheng man 70 20

**說明:

這裡用到2維陣列,adata[檔名,關聯列對應值] ,這種方法可以將多個檔案內容。放入乙個統一二維陣列。然後迴圈陣列,通過if((i,j} in array) 查詢對應列值,在其它檔案中是否存在。

以上是2種實現方法,其中第一種思路較為簡單,很容易理解。第二種處理起來較為複雜。有更好方法大家給我分享。

awk 多檔案操作2種實現方法

我們經常會將2個有關聯文字檔案進行合併處理。分別從不同檔案獲取需要的列,然後,整體輸出到一起。awk進行多檔案處理時候,常常會遇到2個方面問題,第乙個是怎麼樣合併多個檔案為乙個檔案。第二個問題就是怎麼樣將多行合併為一行顯示。我這裡說下我的處理2種方法,還有實現思路。例項文字 1 2 3 4 5 6 ...

AWK實現多檔案讀取和處理

當我們使用awk整合檔案的時候,如果是兩個檔案,我們經常會用nr fnr和nr fnr兩個來指定讀取第乙個或者是第二個檔案,但是如果涉及到三個及以上檔案這種方式就不適用,除非我們使用前面兩個檔案的方式,生成第三者,在用第三者進行整合,也是可以實現,但是這樣子多了個第三者,而且顯得比較笨拙。我們可以使...

reduce 方法實現 webpack 多檔案入口

這篇日誌,在開始接觸 webpack 時候就該寫了,現在發布也許對一些剛入此坑的童鞋能些許幫助。即使有點 low,重要的仍是分享 reduce 函式的設計意圖就是方便進行疊加運算 var arr 0,1,2,3 reduce 實現累加 var total arr.reduce function pr...