位置:首頁 > 高級語言 > Sed教學 > Sed正則表達式

Sed正則表達式

sed是強大,高效的處理正則表達式。一些複雜的任務,可以解決簡單的正則表達式。任何命令行專家都知道正則表達式的威力。

本教學介紹了標準的正則表達式,POSIX類的正則表達式和元字符。考慮我們有一個文本文件 books.txt 將被處理,它有以下內容:

A Storm of Swords, George R. R. Martin
The Two Towers, J. R. R. Tolkien
The Alchemist, Paulo Coelho
The Fellowship of the Ring, J. R. R. Tolkien
The Pilgrimage, Paulo Coelho
A Game of Thrones, George R. R. Martin

標準的正則表達式

行開始 (^)

插入符號(^)符號用於一行的開始匹配。下麵的例子打印所有的啟動與模式“the”行。

[jerry]$ sed -n '/^The/ p' books.txt

執行上麵的代碼,會得到如下結果:

The Two Towers, J. R. R. Tolkien
The Alchemist, Paulo Coelho
The Fellowship of the Ring, J. R. R. Tolkien
The Pilgrimage, Paulo Coelho

行尾 ($)

行尾是由美元符號($)符號表示。下麵的例子打印“Coelho”結尾的行。

[jerry]$ sed -n '/Coelho$/ p' books.txt 

執行上麵的代碼,會得到如下結果:

The Alchemist, Paulo Coelho 
The Pilgrimage, Paulo Coelho

單個字符(.)

點(.)匹配除行字符結尾的任何單個字符。下麵的例子打印所有三個字母的單詞字符 “t” 結尾。

[jerry]$ echo -e "cat\nbat\nrat\nmat\nbatting\nrats\nmats" | sed -n '/^..t$/p' 

執行上麵的代碼,會得到如下結果:

cat 
bat 
rat 
mat

匹配字符集合 ([])

字符集是用方括號([])表示。它用來匹配隻有1個之中的幾個字符。下麵的例子匹配模式“Call”和“Tall”,而不是“Ball”。

[jerry]$ echo -e "Call\nTall\nBall" | sed -n '/[CT]all/ p'

執行上麵的代碼,會得到如下結果:

Call 
Tall

獨有集 ([^])

當使用的字符集使用時,插入符否定集在方括號字符。隻有下麵的示例打印“Ball”。

[jerry]$ echo -e "Call\nTall\nBall" | sed -n '/[^CT]all/ p'

執行上麵的代碼,會得到如下結果:

Ball 

字符範圍 ([-])

當被提供的字符範圍,則正則表達式匹配在方括號中指定的範圍內的任何字符。下麵的例子匹配“Call”和“Tall”,而不是“Ball”。

[jerry]$ echo -e "Call\nTall\nBall" | sed -n '/[C-Z]all/ p' 

執行上麵的代碼,會得到如下結果:

Call 
Tall

現在,讓我們修改範圍為“A-P”,並觀察結果。

[jerry]$ echo -e "Call\nTall\nBall" | sed -n '/[A-P]all/ p' 

執行上麵的代碼,會得到如下結果:

Call 
Ball

零到一次出現 (\?)

問號(\?)匹配零個或一個匹配前麵的字符。下麵的例子匹配“Behaviour”和“Behavior”。在這裡,我們通過使用“\?”使“u”作為一個可選的字符。

[jerry]$ echo -e "Behaviour\nBehavior" | sed -n '/Behaviou\?r/ p' 

執行上麵的代碼,會得到如下結果:

Behaviour 
Behavior

一次或多次出現 (\+)

加號(\+)匹配前麵的字符出現一次或多次。下麵的例子匹配“2”出現一次或多次。

[jerry]$ echo -e "111\n22\n123\n234\n456\n222"  | sed -n '/2\+/ p'

執行上麵的代碼,會得到如下結果:

22 
123 
234 
222 

零或多次出現 (*)

星號(*)匹配零個或多個發生了前麵的字符。下麵的例子匹配"ca", "cat", "catt"等依此類推。

[jerry]$ echo -e "ca\ncat" | sed -n '/cat*/ p' 

執行上麵的代碼,會得到如下結果:

ca 
cat 

n個重複 {n}

{n}表達完全一致的“n”出現前麵的字符。下麵的例子打印隻有三個數字。但在這之前,你需要創建以下文件,該文件僅包含數字。考慮 numbers.txt 有以下內容:

1 
10 
100 
1000 
10000 
100000 
1000000 
10000000 
100000000 
1000000000

現在讓我們編寫 Sed 表達式。在這裡,對花括號中的“\”字符轉義。

[jerry]$ sed -n '/^[0-9]\{3\}$/ p' numbers.txt 

執行上麵的代碼,會得到如下結果:

100

最少出現n個 {n,}

{n,} 表達式匹配,至少是“n”出現前麵的字符。下麵的例子打印大於或等於5個數字的所有數字。

[jerry]$ sed -n '/^[0-9]\{5,\}$/ p' numbers.txt

執行上麵的代碼,會得到如下結果:

10000 
100000 
1000000
10000000 
100000000 
1000000000 

M到N次出現 {m, n}

{m, n} 表達式匹配,至少是“M”和最“N”出現前麵的字符。下麵的例子打印所有具有至少5個數字,但不超過8位的數字。

[jerry]$ sed -n '/^[0-9]\{5,8\}$/ p' numbers.txt

執行上麵的代碼,會得到如下結果:

10000 
100000 
1000000 
10000000 

管道(|)

管道符的行為類似於邏輯或運算。它從管的兩側相匹配的條目。下麵的例子要麼匹配"str1" 和 "str3"。這裡,一對括號和管道 (|) 由“\”字符轉義。

[jerry]$ echo -e "str1\nstr2\nstr3\nstr4" | sed -n '/str\(1\|3\)/ p' 

執行上麵的代碼,會得到如下結果:

str1 
str3

字符轉義

有哪些有在Sed有特殊含義的特殊字符。例如,用“\n”表示換行,回車被為“\r”表示,依此類推。要使用這些字符轉換成普通的ASCII,我們必須使用反斜杠(\)字符轉義。本章說明了轉義特殊字符。

轉義 "\"

下麵的例子匹配的模式“\”。

[jerry]$ echo 'str1\str2' | sed -n '/\\/ p'

執行上麵的代碼,會得到如下結果:

str1\str2 

轉義 "\n"

下麵的示例將新行字符匹配。

[jerry]$ echo 'str1\nstr2' | sed -n '/\\n/ p'

執行上麵的代碼,會得到如下結果:

str1\nstr2

轉義 "\r"

下麵的例子回車匹配。

[jerry]$ echo 'str1\rstr2' | sed -n '/\\r/ p'

執行上麵的代碼,會得到如下結果:

str1\rstr2 

轉義"\dnnn"

這個匹配一個字符的十進製ASCII碼值是“nnn”。下麵的例子中隻匹配字符“a”。

[jerry]$ echo -e "a\nb\nc" | sed -n '/\d97/ p'

執行上麵的代碼,會得到如下結果:

a

轉義 "\onnn"

這個匹配字符的八進製ASCII碼值是“nnn”。下麵的例子僅匹配字符“b”。

[jerry]$ echo -e "a\nb\nc" | sed -n '/\o142/ p' 

執行上麵的代碼,會得到如下結果:

b 

這個匹配字符的十六進製ASCII碼值是“nnn”。下麵的例子中隻匹配字符“c”。

[jerry]$ echo -e "a\nb\nc" | sed -n '/\x63/ p'

執行上麵的代碼,會得到如下結果:

c

正則表達式POSIX類

有哪些有Sed 特殊的含義一定的保留字。這些保留字被稱為POSIX類正則表達式。本節介紹Sed支持POSIX類。

[:alnum:]

這意味著按字母和數字字符。下麵的例子隻匹配“One”和“123”,但不匹配製表符。

[jerry]$ echo -e "One\n123\n\t" | sed -n '/[[:alnum:]]/ p'

執行上麵的代碼,會得到如下結果:

One 
123

[:alpha:]

這意味著隻有字母字符。下麵的例子隻匹配單詞“One”。

[jerry]$ echo -e "One\n123\n\t" | sed -n '/[[:alpha:]]/ p'

執行上麵的代碼,會得到如下結果:

One 

[:blank:]

這意味著空白字符可以是任何空格或製表符。下麵的例子隻匹配製表符。

[jerry]$ echo -e "One\n123\n\t" | sed -n '/[[:space:]]/ p' | cat -vte

執行上麵的代碼,會得到如下結果:

^I$

注意,該命令“cat -vte”用於顯示製表符(^ I)中。

[:digit:]

這意味著隻有小數。下麵的例子隻匹配數字“123”。

[jerry]$ echo -e "abc\n123\n\t" | sed -n '/[[:digit:]]/ p' 

執行上麵的代碼,會得到如下結果:

123 

[:lower:]

這意味著隻有小寫字母。下麵的例子隻匹配“one”。

[jerry]$ echo -e "one\nTWO\n\t" | sed -n '/[[:lower:]]/ p' 

執行上麵的代碼,會得到如下結果:

one 

[:upper:]

這意味著隻有大寫字母。下麵的例子隻匹配 "TWO".

[jerry]$ echo -e "one\nTWO\n\t" | sed -n '/[[:upper:]]/ p'

執行上麵的代碼,會得到如下結果:

TWO

[:punct:]

它意味著標點符號包括非空格或字母數字字符

[jerry]$ echo -e "One,Two\nThree\nFour" | sed -n '/[[:punct:]]/ p'

執行上麵的代碼,會得到如下結果:

One,Two

[:space:]

這意味著空格字符。下麵的例子說明了這一點。

[jerry]$ echo -e "One\n123\f\t" | sed -n '/[[:space:]]/ p' | cat -vte 

執行上麵的代碼,會得到如下結果:

123^L^I$ 

元字符

像傳統的正則表達式,Sed也支持特殊字符。這些是Perl風格正則表達式。需要注意的是元字符的支持是GNU Sed,可能無法與Sed的其他變種的工作。讓我們詳細討論的元字符。

單詞邊界 (\b)

“\b”元字符的字邊界匹配。例如,“\bthe\b”匹配“the”而不是"these", "there", "they", "then", 依此類推。下麵的例子說明了這一點。

[jerry]$ echo -e "these\nthe\nthey\nthen" | sed -n '/\bthe\b/ p'

執行上麵的代碼,會得到如下結果:

the

非單詞邊界(\B)

“\B”元字符匹配非單詞邊界。例如,“the\B”匹配“,這些”these“和“they”而不是“the”。下麵的例子說明了這一點。

[jerry]$ echo -e "these\nthe\nthey" | sed -n '/the\B/ p'

執行上麵的代碼,會得到如下結果:

these 
they

單空白 (\s)

“\s”元字符意味著單個空格字符。下麵的例子匹配“Line\t1”,但不匹配“Line1”。

[jerry]$ echo -e "Line\t1\nLine2" | sed -n '/Line\s/ p'

執行上麵的代碼,會得到如下結果:

Line 1 

單非空白 (\S)

“\S”元字符意味著單個空格字符。下麵的例子匹配“Line2”,但不匹配“Line\t1”。

[jerry]$ echo -e "Line\t1\nLine2" | sed -n '/Line\S/ p' 

執行上麵的代碼,會得到如下結果:

Line2

單字字符 (\w)

“\W”元字符意味著單個單詞字符,即字母字符,數字和下劃線(_)。下麵的例子說明了這一點。

[jerry]$ echo -e "One\n123\n1_2\n&;#" | sed -n '/\w/ p'

執行上麵的代碼,會得到如下結果:

One 
123 
1_2

單非單詞字符 (\W)

“\W”元字符意味著一個非單詞字符,以“\w”正好相反。下麵的例子說明了這一點。

[jerry]$ echo -e "One\n123\n1_2\n&;#" | sed -n '/\W/ p'

On executing the above code, you get the following result:

&;#

模式空間的開始 (\`)

“\”'元字符意味著將模式空間的開始位置。下麵的例子隻匹配單詞“One”。

[jerry]$ echo -e "One\nTwo One" | sed -n '/\`One/ p' 

執行上麵的代碼,會得到如下結果:

One