<s id="2e0qm"><div id="2e0qm"></div></s>
<div id="2e0qm"><button id="2e0qm"></button></div>
<small id="2e0qm"></small>
<div id="2e0qm"></div>
<div id="2e0qm"><s id="2e0qm"></s></div>
<div id="2e0qm"><button id="2e0qm"></button></div>
主頁 > 知識庫 > 服務器 > Linux/BSD >

linux shell必知必會sed、awk

來源:中國IT實驗室 作者:佚名 發表于:2013-07-12 12:06  點擊:
sed是一種在線編輯器,它一次處理一行內容。處理時,把當前處理的行存儲在臨時緩沖區中,稱為模式空間(pattern space),接著用sed命令處理緩沖區中的內容,處理完成后,把緩沖區的內容送往屏幕。接著處理下一行,這樣不斷重復,直到文件末尾。文件內容并沒
sed是一種在線編輯器,它一次處理一行內容。處理時,把當前處理的行存儲在臨時緩沖區中,稱為“模式空間”(pattern space),接著用sed命令處理緩沖區中的內容,處理完成后,把緩沖區的內容送往屏幕。接著處理下一行,這樣不斷重復,直到文件末尾。文件內容并沒有改變,除非你使用重定向存儲輸出。Sed主要用來自動編輯一個或多個文件;簡化對文件的反復操作;編寫轉換程序等。以下介紹的是Gnu版本的Sed 3.02。
   2. 定址
   可以通過定址來定位你所希望編輯的行,該地址用數字構成,用逗號分隔的兩個行數表示以這兩行為起止的行的范圍(包括行數表示的那兩行)。如1,3表示1,2,3行,美元符號($)表示最后一行。范圍可以通過數據,正則表達式或者二者結合的方式確定 。
   3. Sed命令
   調用sed命令有兩種形式:
   sed [options] 'command' file(s)
   sed [options] -f scriptfile file(s)
   a\
   在當前行后面加入一行文本。
   b lable
   分支到腳本中帶有標記的地方,如果分支不存在則分支到腳本的末尾。
   c\
   用新的文本改變本行的文本。
   d
   從模板塊(Pattern space)位置刪除行。
   D
   刪除模板塊的第一行。
   i\
   在當前行上面插入文本。
   h
   拷貝模板塊的內容到內存中的緩沖區。
   H
   追加模板塊的內容到內存中的緩沖區
   g
   獲得內存緩沖區的內容,并替代當前模板塊中的文本。
   G
   獲得內存緩沖區的內容,并追加到當前模板塊文本的后面。
   l
   列表不能打印字符的清單。
   n
   讀取下一個輸入行,用下一個命令處理新的行而不是用第一個命令。
   N
   追加下一個輸入行到模板塊后面并在二者間嵌入一個新行,改變當前行號碼。
   p
   打印模板塊的行。
   P(大寫)
   打印模板塊的第一行。
   q
   退出Sed。
   r file
   從file中讀行。
   t label
   if分支,從最后一行開始,條件一旦滿足或者T,t命令,將導致分支到帶有標號的命令處,或者到腳本的末尾。
   T label
   錯誤分支,從最后一行開始,一旦發生錯誤或者T,t命令,將導致分支到帶有標號的命令處,或者到腳本的末尾。
   w file
   寫并追加模板塊到file末尾。
   W file
   寫并追加模板塊的第一行到file末尾。
   !
   表示后面的命令對所有沒有被選定的行發生作用。
   s/re/string
   用string替換正則表達式re。
   =
   打印當前行號碼。
   #
   把注釋擴展到下一個換行符以前。
   以下的是替換標記
   g表示行內全面替換。
   p表示打印行。
   w表示把行寫入一個文件。
   x表示互換模板塊中的文本和緩沖區中的文本。
   y表示把一個字符翻譯為另外的字符(但是不用于正則表達式)
   4. 選項
   -e command, --expression=command
   允許多臺編輯。
   -h, --help
   打印幫助,并顯示bug列表的地址。
   -n, --quiet, --silent
   取消默認輸出。
   -f, --filer=script-file
   引導sed腳本文件名。
   -V, --version
   打印版本和版權信息。
   5. 元字符集
   ^
   錨定行的開始 如:/^sed/匹配所有以sed開頭的行。
   $
   錨定行的結束 如:/sed$/匹配所有以sed結尾的行。
   .
   匹配一個非換行符的字符 如:/s.d/匹配s后接一個任意字符,然后是d。
   *
   匹配零或多個字符 如:/*sed/匹配所有模板是一個或多個空格后緊跟sed的行。
   []
   匹配一個指定范圍內的字符,如/[Ss]ed/匹配sed和Sed。
   [^]
   匹配一個不在指定范圍內的字符,如:/[^A-RT-Z]ed/匹配不包含A-R和T-Z的一個字母開頭,緊跟ed的行。
   \(..\)
   保存匹配的字符,如s/\(love\)able/\1rs,loveable被替換成lovers。
   &
   保存搜索字符用來替換其他字符,如s/love/**&**/,love這成**love**。
   \<
   錨定單詞的開始,如:/\<love/匹配包含以love開頭的單詞的行。
   \>
   錨定單詞的結束,如/love\>/匹配包含以love結尾的單詞的行。
   x\{m\}
   重復字符x,m次,如:/0\{5\}/匹配包含5個o的行。
   x\{m,\}
   重復字符x,至少m次,如:/o\{5,\}/匹配至少有5個o的行。
   x\{m,n\}
   重復字符x,至少m次,不多于n次,如:/o\{5,10\}/匹配5--10個o的行。
   6. 實例
   刪除:d命令
   $ sed '2d' example-----刪除example文件的第二行。
   $ sed '2,$d' example-----刪除example文件的第二行到末尾所有行。
   $ sed '$d' example-----刪除example文件的最后一行。
   $ sed '/test/'d example-----刪除example文件所有包含test的行。
   替換:s命令
   $ sed 's/test/mytest/g' example-----在整行范圍內把test替換為mytest。如果沒有g標記,則只有每行第一個匹配的test被替換成mytest。
   $ sed -n 's/^test/mytest/p' example-----(-n)選項和p標志一起使用表示只打印那些發生替換的行。也就是說,如果某一行開頭的test被替換成mytest,就打印它。
   $ sed 's/^192.168.0.1/&localhost/' example-----&符號表示替換換字符串中被找到的部份。所有以192.168.0.1開頭的行都會被替換成它自已加 localhost,變成192.168.0.1localhost。
   $ sed -n 's/\(love\)able/\1rs/p' example-----love被標記為1,所有loveable會被替換成lovers,而且替換的行會被打印出來。
   $ sed 's#10#100#g' example-----不論什么字符,緊跟著s命令的都被認為是新的分隔符,所以,“#”在這里是分隔符,代替了默認的“/”分隔符。表示把所有10替換成100。
   選定行的范圍:逗號
   $ sed -n '/test/,/check/p' example-----所有在模板test和check所確定的范圍內的行都被打印。
   $ sed -n '5,/^test/p' example-----打印從第五行開始到第一個包含以test開始的行之間的所有行。
   $ sed '/test/,/check/s/$/sed test/' example-----對于模板test和west之間的行,每行的末尾用字符串sed test替換。
   多點編輯:e命令
   $ sed -e '1,5d' -e 's/test/check/' example-----(-e)選項允許在同一行里執行多條命令。如例子所示,第一條命令刪除1至5行,第二條命令用check替換test。命令的執 行順序對結果有影響。如果兩個命令都是替換命令,那么第一個替換命令將影響第二個替換命令的結果。
   $ sed --expression='s/test/check/' --expression='/love/d' example-----一個比-e更好的命令是--expression。它能給sed表達式賦值。
   從文件讀入:r命令
   $ sed '/test/r file' example-----file里的內容被讀進來,顯示在與test匹配的行后面,如果匹配多行,則file的內容將顯示在所有匹配行的下面。
   寫入文件:w命令
   $ sed -n '/test/w file' example-----在example中所有包含test的行都被寫入file里。
   追加命令:a命令
   $ sed '/^test/a\\--->this is a example' example<-----'this is a example'被追加到以test開頭的行后面,sed要求命令a后面有一個反斜杠。
   插入:i命令
   $ sed '/test/i\\
   new line
   -------------------------' example
   如果test被匹配,則把反斜杠后面的文本插入到匹配行的前面。
   下一個:n命令
   $ sed '/test/{ n; s/aa/bb/; }' example-----如果test被匹配,則移動到匹配行的下一行,替換這一行的aa,變為bb,并打印該行,然后繼續。
   變形:y命令
   $ sed '1,10y/abcde/ABCDE/' example-----把1--10行內所有abcde轉變為大寫,注意,正則表達式元字符不能使用這個命令。
   退出:q命令
   $ sed '10q' example-----打印完第10行后,退出sed。
   保持和獲取:h命令和G命令
   $ sed -e '/test/h' -e '$G example-----在sed處理文件的時候,每一行都被保存在一個叫模式空間的臨時緩沖區中,除非行被刪除或者輸出被取消,否則所有被處理的行都將 打印在屏幕上。接著模式空間被清空,并存入新的一行等待處理。在這個例子里,匹配test的行被找到后,將存入模式空間,h命令將其復制并存入一個稱為保 持緩存區的特殊緩沖區內。第二條語句的意思是,當到達最后一行后,G命令取出保持緩沖區的行,然后把它放回模式空間中,且追加到現在已經存在于模式空間中 的行的末尾。在這個例子中就是追加到最后一行。簡單來說,任何包含test的行都被復制并追加到該文件的末尾。
   保持和互換:h命令和x命令
   $ sed -e '/test/h' -e '/check/x' example -----互換模式空間和保持緩沖區的內容。也就是把包含test與check的行互換。
   7. 腳本
   Sed腳本是一個sed的命令清單,啟動Sed時以-f選項引導腳本文件名。Sed對于腳本中輸入的命令非常挑剔,在命令的末尾不能有任何空白或文本,如果在一行中有多個命令,要用分號分隔。以#開頭的行為注釋行,且不能跨行。
   8. 小技巧
   在sed的命令行中引用shell變量時要使用雙引號,而不是通常所用的單引號。下面是一個根據name變量的內容來刪除named.conf文件中zone段的腳本:
   name='zone\ "localhost"'
   sed "/$name/,/};/d" named.conf
   Table of Contents
   1. awk簡介
   2. awk命令格式和選項
   2.1. awk的語法有兩種形式
   2.2. 命令選項
   3. 模式和操作
   3.1. 模式
   3.2. 操作
   4. awk的環境變量
   5. awk運算符
   6. 記錄和域
   6.1. 記錄
   6.2. 域
   6.3. 域分隔符
   7. gawk專用正則表達式元字符
   8. POSIX字符集
   9. 匹配操作符(~)
   10. 比較表達式
   11. 范圍模板
   12. 一個驗證passwd文件有效性的例子
   13. 幾個實例
   14. awk編程
   14.1. 變量
   14.2. BEGIN模塊
   14.3. END模塊
   14.4. 重定向和管道
   14.5. 條件語句
   14.6. 循環
   14.7. 數組
   14.8. awk的內建函數
   15. How-to
   1. awk簡介
   awk是一種編程語言,用于在linux/unix下對文本和數據進行處理。數據可以來自標準輸入、一個或多個文件,或其它命令的輸出。它支持用戶自定義函數和動態正則表達式等先進功能,是linux/unix 下的一個強大編程工具。它在命令行中使用,但更多是作為腳本來使用。awk的處理文本和數據的方式是這樣的,它逐行掃描文件,從第一行到最后一行,尋找匹 配的特定模式的行,并在這些行上進行你想要的操作。如果沒有指定處理動作,則把匹配的行顯示到標準輸出(屏幕),如果沒有指定模式,則所有被操作所指定的 行都被處理。awk分別代表其作者姓氏的第一個字母。因為它的作者是三個人,分別是Alfred Aho、Brian Kernighan、Peter Weinberger。gawk是awk的GNU版本,它提供了Bell實驗室和GNU的一些擴展。下面介紹的awk是以GUN的gawk為例的,在 linux系統中已把awk鏈接到gawk,所以下面全部以awk進行介紹。
   2. awk命令格式和選項
   2.1. awk的語法有兩種形式
   awk [options] 'script' var=value file(s)
   awk [options] -f scriptfile var=value file(s)
   2.2. 命令選項
   -F fs or --field-separator fs
   指定輸入文件折分隔符,fs是一個字符串或者是一個正則表達式,如-F:。
   -v var=value or --asign var=value
   賦值一個用戶定義變量。
   -f scripfile or --file scriptfile
   從腳本文件中讀取awk命令。
   -mf nnn and -mr nnn
   對nnn值設置內在限制,-mf選項限制分配給nnn的最大塊數目;-mr選項限制記錄的最大數目。這兩個功能是Bell實驗室版awk的擴展功能,在標準awk中不適用。
   -W compact or --compat, -W traditional or --traditional
   在兼容模式下運行awk。所以gawk的行為和標準的awk完全一樣,所有的awk擴展都被忽略。
   -W copyleft or --copyleft, -W copyright or --copyright
   打印簡短的版權信息。
   -W help or --help, -W usage or --usage
   打印全部awk選項和每個選項的簡短說明。
   -W lint or --lint
   打印不能向傳統unix平臺移植的結構的警告。
   -W lint-old or --lint-old
   打印關于不能向傳統unix平臺移植的結構的警告。
   -W posix
   打開兼容模式。但有以下限制,不識別:\x、函數關鍵字、func、換碼序列以及當fs是一個空格時,將新行作為一個域分隔符;操作符**和**=不能代替^和^=;fflush無效。
   -W re-interval or --re-inerval
   允許間隔正則表達式的使用,參考(grep中的Posix字符類),如括號表達式[[:alpha:]]。
   -W source program-text or --source program-text
   使用program-text作為源代碼,可與-f命令混用。
   -W version or --version
   打印bug報告信息的版本。
   3. 模式和操作
   awk腳本是由模式和操作組成的:
   pattern {action} 如$ awk '/root/' test,或$ awk '$3 < 100' test。
   兩者是可選的,如果沒有模式,則action應用到全部記錄,如果沒有action,則輸出匹配全部記錄。默認情況下,每一個輸入行都是一條記錄,但用戶可通過RS變量指定不同的分隔符進行分隔。
   3.1. 模式
   模式可以是以下任意一個:
   /正則表達式/:使用通配符的擴展集。
   關系表達式:可以用下面運算符表中的關系運算符進行操作,可以是字符串或數字的比較,如$2>%1選擇第二個字段比第一個字段長的行。
   模式匹配表達式:用運算符~(匹配)和~!(不匹配)。
   模式,模式:指定一個行的范圍。該語法不能包括BEGIN和END模式。
   BEGIN:讓用戶指定在第一條輸入記錄被處理之前所發生的動作,通常可在這里設置全局變量。
   END:讓用戶在最后一條輸入記錄被讀取之后發生的動作。

有幫助
(0)
0%
沒幫助
(0)
0%
真人女荫道口100种图片
<s id="2e0qm"><div id="2e0qm"></div></s>
<div id="2e0qm"><button id="2e0qm"></button></div>
<small id="2e0qm"></small>
<div id="2e0qm"></div>
<div id="2e0qm"><s id="2e0qm"></s></div>
<div id="2e0qm"><button id="2e0qm"></button></div>