一篇文章學(xué)會(huì)shell工具篇之sed
sed工具執(zhí)行原理;
- 有關(guān)sed的參數(shù)及action的常見(jiàn)操作方法;
- 定址;
- 模式空間和保持空間;
- 使用標(biāo)簽
1.首先先來(lái)了解一下什么是sed？
sed叫做流編輯器，在shell腳本和Makefile中作為過(guò)濾器使用非常普遍，也就是把前一個(gè)程序的輸出引入sed的輸入，經(jīng)過(guò)一系列編輯命令轉(zhuǎn)換成為另一種格式輸出。下面我們通過(guò)一張?jiān)韴D來(lái)了解一下它的工作模式：
編輯命令的格式為，sed?? /pattern/action
經(jīng)過(guò)sed處理后文件內(nèi)容并沒(méi)有改變，除?使用重定向存儲(chǔ)輸出。sed主要用來(lái)自動(dòng)編輯一個(gè)或多個(gè)文件；簡(jiǎn)化對(duì)文件的反復(fù)操作；sed默認(rèn)按照Basic 規(guī)范基本匹配！也就是說(shuō)類(lèi)似于( ) { } | 等特殊字符需轉(zhuǎn)義，否則就不識(shí)別，或者是用擴(kuò)展模式也可以。
2. 下面重點(diǎn)介紹一下有關(guān)sed的參數(shù)及action的操作方法
（1）-n參數(shù)，p命令的action
(2) d命令的action
（3）/pattern/s/pattern1/pattern2/：查找符合pattern的行,將該行第一個(gè)匹配pattern1的字符串替換為pattern2
/pattern/s/pattern1/pattern2/g：查找符合pattern的行,將該行所有匹配pattern1的字符串替換為pattern2
這個(gè)操作不知道大家會(huì)不會(huì)聯(lián)想到vim編輯器中的底行模式搜索，它們是類(lèi)似的。
下面總結(jié)一下sed中參數(shù)的選擇及執(zhí)行操作：
[plain]?view plain?copy
- <strong>參數(shù)選擇：
- -n:一般sed命令會(huì)把所有數(shù)據(jù)都輸出到屏幕，如果加入-n選項(xiàng)的話，則只會(huì)把經(jīng)過(guò)sed命令處理的行輸出到屏幕。
- -e:允許對(duì)輸入數(shù)據(jù)應(yīng)用多條sed命令編輯。
- -i:將修改結(jié)果直接寫(xiě)入到讀取數(shù)據(jù)的文件，而不是由屏幕輸出。（1.修改了文件;?2.由cat可查看）
- -f:?指定sed腳本的文件名。
- action:
- a:追加，在當(dāng)前行后添加一行或多行。
- c:行替換，用c后面的字符串替換原數(shù)據(jù)行。
- i:插入，在當(dāng)前行前插入一行或多行。
- p:打印，輸出指定的行。
- s:字符串替換，用一個(gè)字符串替換另外一個(gè)字符串。格式為”行范圍s/舊字符串/新字符串/g”(如果不加g的話，則表示只替換每行第一個(gè)匹配的串)。
- </strong>
以上沒(méi)有練習(xí)到的，有興趣的可以去嘗試嘗試！
3.再來(lái)介紹一下sed中的定址
定址用于決定對(duì)文件中哪些行進(jìn)行行編輯，地址的形式可以是數(shù)字、正則表達(dá)式、或二者的結(jié)合。如果沒(méi)有指定地址，sed將處理輸入文件的所有行。下面舉一些例子：
sed '/start/ ,/end/d' file?? #刪除包含’start’行和’end’行之間的行
sed '/start/, 10d' file????? ?#刪除包含’start’ 的行到第十行的內(nèi)容
4.模式空間和保持空間
(1)保持空間:用來(lái)存儲(chǔ)數(shù)據(jù)，相當(dāng)于一個(gè)倉(cāng)庫(kù)，它不能對(duì)數(shù)據(jù)進(jìn)行處理 ;
(2)模式空間:專(zhuān)門(mén)以行為單位對(duì)數(shù)據(jù)進(jìn)行處理。
?一般情況下，如果不顯示的使用一些選項(xiàng)的話，是不會(huì)用到保持空間的。
[plain]?view plain?copy
- <span?style="color:#000000;"><strong>命令：
- g:將保持空間的內(nèi)容拷貝到模式空間中，會(huì)將模式空間原來(lái)的值覆蓋掉。
- G:將保持空間的內(nèi)容追加到模式空間中。
- h:將模式空間的值拷貝到保持空間，會(huì)將保持空間原來(lái)的值覆蓋掉。
- H:將模式空間的值追加到保持空間中。
- d:刪除模式空間的所有行，并讀下一行到模式空間。
- D:刪除模式空間的第一行，不讀下一行到模式空間。
- n:輸出模式空間的行，讀取下一行替換當(dāng)前模式空間的行，接著執(zhí)行下一條處理命令而不是第一條命令。
- N:讀入下一行，追加到模式空間行后面，此時(shí)模式空間中有兩行。
- x:交換模式空間和保持空間的內(nèi)容。
- </strong></span>
例1：給每行后面添加一行空行
例2：用sed模擬倒序(tac)打印的過(guò)程
例3.追加匹配行到文件末尾
例4：將一列內(nèi)容變?yōu)橐恍?/p>
例5：求出1-100的求和
例6：打印輸出奇數(shù)行和偶數(shù)行
5.使用標(biāo)簽
[plain]?view plain?copy
- :a表示標(biāo)簽a；
- ba表示跳轉(zhuǎn)到a標(biāo)簽；
- $表示最后一行；
- ！表示不做后續(xù)操作
- 所以，$!ba表示最后一行不用跳轉(zhuǎn)到a標(biāo)簽，結(jié)束此次操作。
下面舉一個(gè)例子：
最后補(bǔ)充一點(diǎn):
[plain]?view plain?copy
- 與grep一樣，sed也支持特殊元字符來(lái)進(jìn)行模式查找、替換。不同的是，sed使用的正則表達(dá)式是括在斜杠線"/"之間的模式。
- 如果要把正則表達(dá)式分隔符"/"改為另一個(gè)字符，比如o，只要在這個(gè)字符前加一個(gè)反斜線，在字符后跟上正則表達(dá)式，再跟上這個(gè)字符即可。例如：sed?-n?'\o^56op'?datafile
- ^：行首定位符?????????/^my/??匹配所有以my開(kāi)頭的行;
- $：行尾定位符????????/my$/?匹配所有以my結(jié)尾的行;
- .：匹配除換行符以外的單個(gè)字符????????/m..y/?匹配包含字母m，后跟兩個(gè)任意字符，再跟字母y的行;
- *：匹配零個(gè)或多個(gè)前導(dǎo)字符?????????????/test*/?匹配包含字符串?tes,后跟零個(gè)或多個(gè)?t?字母的行；
- []：匹配指定字符組內(nèi)的任一字符????/t[eE]st/?匹配包含test?或?tEst?的行；
- [^]：匹配不在指定字符組內(nèi)的任一字符?????/t[^eE]st/??匹配string?以t開(kāi)頭，但st之前的那個(gè)字符不是e或E的行；
- &：保存查找串以便在替換串中引用?????????s/test/*&*/g??符號(hào)&代表查找串。test將被替換為*test*
- \<：詞?首定位符?/\<my/?匹配包含以my開(kāi)頭的單詞的行；
- \>：詞尾定位符????/my\>/?匹配包含以my結(jié)尾的單詞的行；
- x\{m\}：連續(xù)m個(gè)x????????如：/9\{5\}/?匹配包含連續(xù)5個(gè)9的行；
- x\{m,\}：至少m個(gè)x???????如：/9\{5,\}/?匹配包含至少連續(xù)5個(gè)9的行；
- x\{m,n\}：至少m個(gè)，但不超過(guò)n個(gè)x?????如：/9\{5,7\}/?匹配包含連續(xù)5到7個(gè)9的行。
還有一個(gè)單元匹配--替換的問(wèn)題：