shell 處理文字工具集合（常用命令）

提供的例子和引數都是最常用和最為實用的；

我對shell指令碼使用的原則是命令單行書寫，盡量不要超過2行；

如果有更為複雜的任務需求，還是考慮python吧；

預設使用'\n'作為檔案的定界符；

-print0 使用'\0'作為檔案的定界符，這樣就可以搜尋包含空格的檔案；

grep match_patten file // 預設訪問匹配行

xargs 能夠將輸入資料轉化為特定命令的命令列引數；這樣，可以配合很多命令來組合使用。比如grep，比如find；

-d 定義定界符 （預設為空格 多行的定界符為 \n）

-n 指定輸出為多行

-i {} 指定替換字串，這個字串在xargs擴充套件時會被替換掉,用於待執行的命令需要多個引數時

eg：

cat file.txt | xargs -i {} ./command.sh -p {} -1

eg：統計程式行數

find source_dir/ -type f -name "*.cpp" -print0 |xargs -0 wc -l

-n 按數字進行排序 vs -d 按字典序進行排序

-r 逆序排序

-k n 指定按第n列排序

eg：

sort -nrk 1 data.txt

sort -bd data // 忽略像空格之類的前導空白字元

cat file112

cat file2
colin
book
paste file1 file2
1 colin
2 book

paste file1 file2 -d ","

1,colin
2,book

wc -w file // 統計單詞數

wc -c file // 統計字元數

nr:表示記錄數量，在執行過程中對應當前行號；

nf:表示字段數量，在執行過程總對應當前行的字段數；

$0:這個變數包含執行過程中當前行的文字內容；

$1:第乙個欄位的文字內容；

$2:第二個欄位的文字內容；

echo -e "line1 f2 f3\n line2 \n line 3" | awk ''

var=1000

echo | awk '' vara=$var #  輸入來自stdin
awk '' vara=$var file # 輸入來自檔案

awk 'nr==1,nr==4 ' file #行號等於1和4的列印出來

awk '/linux/' #包含linux文字的行（可以用正規表示式來指定，超級強大）

awk '!/linux/' #不包含linux文字的行

使用-f來設定定界符（預設為空格）

awk -f: '' /etc/passwd

使用getline，將外部shell命令的輸出讀入到變數cmdout中；

echo | awk ''

for(i=0;i<10;i++)

for(i in array)

以逆序的形式列印行：(tac命令的實現）

seq 9| \

awk ' \
end} '

sub(regex,replacement_str,string):將正則匹配到的第一處內容替換為replacement_str;

match(regex,string):檢查正規表示式是否能夠匹配字串；

length(string)：返回字串長度

echo | awk ''

eg：

seq 10 | awk ''

for word in $line;

do echo $word;
done

$:返回變數word的長度

for((i=0;i<$;i++))

doecho ${word:i:1);
done

常用的shell處理txt文字命令集合

以下是部分的shell命令集合希望能對大家有所幫助 ls r home jiaotong404 lh data hk data jpegimages jpg file.txt 將資料夾下的jpg檔名都輸出到file.txt find dir name jpg train.txt 將dir資料夾下jp...

shell處理文字

1 grep 同時滿足多個關鍵字和滿足任意關鍵字 grep e word1 word2 word3 file.txt 滿足任意條件 word1 word2和word3之一 將匹配。grep word1 file.txt grep word2 grep word3 必須同時滿足三個條件 word1 w...

自學筆記 shell（文字處理工具）

1.sort的 t選項使空白有意義，且被指定的字元會分隔字段。2.k2.5,5.6指的是從第二個欄位的第四個字元開始比較，一直到第五個欄位的第六個字元。3.sort uniq 常用語管道中刪除已使用sort排序完成的重覆記錄。uniq的三個選項 c在輸出行前加上該行重複次數 d僅顯示重複的行 u僅顯...