Linux sed命令詳解

2022-01-30 Linux愛好者

(點擊上方公眾號,可快速關注)

來源:ggjucheng

連結:www.cnblogs.com/ggjucheng/archive/2013/01/13/2856901.html


簡介

sed 是一種在線編輯器,它一次處理一行內容。處理時,把當前處理的行存儲在臨時緩衝區中,稱為「模式空間」(pattern space),接著用sed命令處理緩衝區中的內容,處理完成後,把緩衝區的內容送往屏幕。接著處理下一行,這樣不斷重複,直到文件末尾。文件內容並沒有 改變,除非你使用重定向存儲輸出。Sed主要用來自動編輯一個或多個文件;簡化對文件的反覆操作;編寫轉換程序等。

sed使用參數

[root@wwww ~]# sed [-nefr] [動作]
選項與參數:
-n :使用安靜(silent)模式。在一般 sed 的用法中,所有來自 STDIN 的數據一般都會被列出到終端上。但如果加上 -n 參數後,則只有經過sed 特殊處理的那一行(或者動作)才會被列出來。
-e :直接在命令列模式上進行 sed 的動作編輯;
-f :直接將 sed 的動作寫在一個文件內, -f filename 則可以運行 filename 內的 sed 動作;
-r :sed 的動作支持的是延伸型正規表示法的語法。(默認是基礎正規表示法語法)
-i :直接修改讀取的文件內容,而不是輸出到終端。

動作說明: [n1[,n2]]function
n1, n2 :不見得會存在,一般代表『選擇進行動作的行數』,舉例來說,如果我的動作是需要在 10 到 20 行之間進行的,則『 10,20[動作行為] 』

function:
a :新增, a 的後面可以接字串,而這些字串會在新的一行出現(目前的下一行)~
c :取代, c 的後面可以接字串,這些字串可以取代 n1,n2 之間的行!
d :刪除,因為是刪除啊,所以 d 後面通常不接任何咚咚;
i :插入, i 的後面可以接字串,而這些字串會在新的一行出現(目前的上一行);
p :列印,亦即將某個選擇的數據印出。通常 p 會與參數 sed -n 一起運行~
s :取代,可以直接進行取代的工作哩!通常這個 s 的動作可以搭配正規表示法!例如 1,20s/old/new/g 就是啦!


以行為單位的新增/刪除

將 /etc/passwd 的內容列出並且列印行號,同時,請將第 2~5 行刪除!

[root@wwww~]# nl /etc/passwd | sed '2,5d'

1 root:x:0:0:root:/root:/bin/bash

6 sync:x:5:0:sync:/sbin:/bin/sync

7 shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown

(後面省略)

sed 的動作為 『2,5d』 ,那個 d 就是刪除!因為 2-5 行給他刪除了,所以顯示的數據就沒有 2-5 行羅~ 另外,注意一下,原本應該是要下達 sed -e 才對,沒有 -e 也行啦!同時也要注意的是, sed 後面接的動作,請務必以 」 兩個單引號括住喔!

只要刪除第 2 行

nl /etc/passwd | sed '2d'

要刪除第 3 到最後一行

nl /etc/passwd | sed '3,$d'

在第二行後(亦即是加在第三行)加上『drink tea?』字樣!

[root@wwww~]# nl /etc/passwd | sed '2a drink tea'

1 root:x:0:0:root:/root:/bin/bash

2 bin:x:1:1:bin:/bin:/sbin/nologin

drink tea

3 daemon:x:2:2:daemon:/sbin:/sbin/nologin

(後面省略)

那如果是要在第二行前

nl /etc/passwd | sed '2i drink tea'

如果是要增加兩行以上,在第二行後面加入兩行字,例如『Drink tea or …..』與『drink beer?』

[root@www ~]# nl /etc/passwd | sed '2a Drink tea or .\

> drink beer ?'

root:x:0:0:root:/root:/bin/bash

bin:x:1:1:bin:/bin:/sbin/nologin

Drink tea or .

drink beer ?

daemon:x:2:2:daemon:/sbin:/sbin/nologin

(後面省略)

每一行之間都必須要以反斜槓『 \』來進行新行的添加喔!所以,上面的例子中,我們可以發現在第一行的最後面就有 \ 存在。

以行為單位的替換與顯示

將第2-5行的內容取代成為『No 2-5 number』呢?

[root@wwww~]# nl /etc/passwd | sed '2,5c No 2-5 number'

1 root:x:0:0:root:/root:/bin/bash

No 2-5 number

6 sync:x:5:0:sync:/sbin:/bin/sync

(後面省略)

透過這個方法我們就能夠將數據整行取代了!

僅列出 /etc/passwd 文件內的第 5-7 行

[root@wwww~]# nl /etc/passwd | sed -n '5,7p'

5 lp:x:4:7:lp:/var/spool/lpd:/sbin/nologin

6 sync:x:5:0:sync:/sbin:/bin/sync

7 shutdown:x:6:0:shutdown:/sbin:/sbin/shutdown

可以透過這個 sed 的以行為單位的顯示功能, 就能夠將某一個文件內的某些行號選擇出來顯示。

數據的搜尋並顯示

搜索 /etc/passwd有root關鍵字的行

nl /etc/passwd | sed '/root/p'

1  root:x:0:0:root:/root:/bin/bash

1  root:x:0:0:root:/root:/bin/bash

2  daemon:x:1:1:daemon:/usr/sbin:/bin/sh

3  bin:x:2:2:bin:/bin:/bin/sh

4  sys:x:3:3:sys:/dev:/bin/sh

5  sync:x:4:65534:sync:/bin:/bin/sync

....下面忽略

如果root找到,除了輸出所有行,還會輸出匹配行。

使用-n的時候將只列印包含模板的行。

nl /etc/passwd | sed -n '/root/p'

1  root:x:0:0:root:/root:/bin/bash


數據的搜尋並刪除

刪除/etc/passwd所有包含root的行,其他行輸出

nl /etc/passwd | sed  '/root/d'

2  daemon:x:1:1:daemon:/usr/sbin:/bin/sh

3  bin:x:2:2:bin:/bin:/bin/sh

....下面忽略

#第一行的匹配root已經刪除了

數據的搜尋並執行命令

找到匹配模式eastern的行後,搜索/etc/passwd,找到root對應的行,執行後面花括號中的一組命令,每個命令之間用分號分隔,這裡把bash替換為blueshell,再輸出這行:

nl /etc/passwd | sed -n '/root/{s/bash/blueshell/;p}'

 1  root:x:0:0:root:/root:/bin/blueshell

如果只替換/etc/passwd的第一個bash關鍵字為blueshell,就退出

nl /etc/passwd | sed -n '/bash/{s/bash/blueshell/;p;q}'    

1  root:x:0:0:root:/root:/bin/blueshell

最後的q是退出。

數據的搜尋並替換

除了整行的處理模式之外, sed 還可以用行為單位進行部分數據的搜尋並取代。基本上 sed 的搜尋與替代的與 vi 相當的類似!他有點像這樣:

sed 's/要被取代的字串/新的字串/g'

先觀察原始信息,利用 /sbin/ifconfig 查詢 IP

[root@wwww~]# /sbin/ifconfig eth0

eth0 Link encap:Ethernet HWaddr 00:90:CC:A6:34:84

inet addr:192.168.1.100 Bcast:192.168.1.255 Mask:255.255.255.0

inet6 addr: fe80::290:ccff:fea6:3484/64 Scope:Link

UP BROADCAST RUNNING MULTICAST MTU:1500 Metric:1

(以下省略)

本機的ip是192.168.1.100。

將 IP 前面的部分予以刪除

[root@wwww ~]# /sbin/ifconfig eth0 | grep 'inet addr' | sed 's/^.*addr://g'

192.168.1.100 Bcast:192.168.1.255 Mask:255.255.255.0

接下來則是刪除後續的部分,亦即: 192.168.1.100 Bcast:192.168.1.255 Mask:255.255.255.0

將 IP 後面的部分予以刪除

[root@wwww~]# /sbin/ifconfig eth0 | grep 'inet addr' | sed 's/^.*addr://g' | sed 's/Bcast.*$//g'

192.168.1.100

多點編輯

一條sed命令,刪除/etc/passwd第三行到末尾的數據,並把bash替換為blueshell

nl /etc/passwd | sed -e '3,$d' -e 's/bash/blueshell/'

1  root:x:0:0:root:/root:/bin/blueshell

2  daemon:x:1:1:daemon:/usr/sbin:/bin/sh

-e表示多點編輯,第一個編輯命令刪除/etc/passwd第三行到末尾的數據,第二條命令搜索bash替換為blueshell。

直接修改文件內容(危險動作)

sed 可以直接修改文件的內容,不必使用管道命令或數據流重導向! 不過,由於這個動作會直接修改到原始的文件,所以請你千萬不要隨便拿系統配置來測試! 我們還是使用下載的 regular_express.txt 文件來測試看看吧!

利用 sed 將 regular_express.txt 內每一行結尾若為 . 則換成 !

[root@wwww~]# sed -i 's/\.$/\!/g' regular_express.txt

利用 sed 直接在 regular_express.txt 最後一行加入『# This is a test』

[root@wwww ~]# sed -i '$a # This is a test' regular_express.txt

由於 $ 代表的是最後一行,而 a 的動作是新增,因此該文件最後新增『# This is a test』!

sed 的『 -i 』選項可以直接修改文件內容,這功能非常有幫助!舉例來說,如果你有一個 100 萬行的文件,你要在第 100 行加某些文字,此時使用 vim 可能會瘋掉!因為文件太大了!那怎辦?就利用 sed 啊!透過 sed 直接修改/取代的功能,你甚至不需要使用 vim 去修訂!

參考

http://vbird.dic.ksu.edu.tw/linux_basic/0330regularex_2.php#sed

http://www.cnblogs.com/stephen-liu74/archive/2011/11/17/2245130.html

【今日微信公號推薦↓】

更多推薦請看值得關注的技術和設計公眾號

其中推薦了包括技術設計極客 和 IT相親相關的熱門公眾號。技術涵蓋:Python、Web前端、Java、安卓、iOS、PHP、C/C++、.NET、Linux、資料庫、運維、大數據、算法、IT職場等。點擊《值得關注的技術和設計公眾號》,發現精彩!

相關焦點

  • linux sed 命令
    sed命令整體可以幹嘛總體而言,sed命令可以對文本進行查找、刪除、插入、替換等操作。它跟vim或者vi命令最大的去區別是,後者只能通過人工交互的方式,對文本進行處理。而很多時候,我們希望腳本自動化的進行文本處理,那麼sed無疑是我們的好幫手命令簡介sed OPTIONS [SCRIPT] [INPUTFILE...]
  • Linux 三劍客 Awk、Sed、Grep 命令詳解
    Linux三劍客Awk命令詳解命令名稱Awk  pattern scanning and processing language命令作用對文本和數據進行處理~ 匹配或不匹配的條件語句x{m} x字符重複m次x{m,} x字符至少重複m次X{m,n} x字符至少重複m次但不起過n次(需指定參數-posix或--re-interval)Linux三劍客Sed命令詳解命令名稱Sed 一個強大的流式文本編輯器
  • Linux常用命令 - sed
    使用 sed 搜索和替換文本的一般形式如下:sed -i 's/SEARCH_REGEX/REPLACEMENT/g' INPUTFILE-i 將其輸出寫入標準輸出seds 替代命令,可能是 sed 中使用最多的命令-/分隔符字符。
  • Linux||sed命令使用講解
    處理時,sed 會把要處理的行存儲在緩衝區中,接著用 sed 命令處理緩衝區中的內容,處理完成後,把緩衝區的內容送往屏幕。接著處理下一行,這樣不斷重複,直到文件末尾。這個緩衝區被稱為「模式空間」(pattern space)。
  • 詳解Linux命令--sed語法和實例講解
    概述sed命令是一個面向字符流的非交互式編輯器,也就是說sed不允許用戶與它進行交互操作。sed是按行來處理文本內容的。在shell中,使用sed來批量修改文本內容是非常方便的。sed命令的選項語法:sed [選項] [動作]選項與參數:
  • Linux sed命令
    命令是利用腳本來處理文本文件。 [root@hadoop01 root]$ nl passwd | sed '/root/d'      2 bin:x:1:1:bin:/bin:/sbin/nologin6、數據的搜尋並執行命令6.1 搜索passwd,找到root對應的行,執行後面花括號中的一組命令
  • Linux | Linux 中使用 find 與 sed 批量替換字符串
    作者:春江暮客原文:https://www.bobobk.com/458.html在 linux 批量替換字符串怎麼辦,一開始想著直接用 sed 帶 -r 之類的迭代式的方法來替換,但是發現 sed 沒有迭代的參數,只能配合使用 find 來獲取文件再利用 sed 來進行替換。
  • linux文本處理三劍客之sed增刪改查
    收錄於話題 #linux 「sed(stream editor, 流編輯器)是linux下非常強大的非交互式的文本編輯器,主要功能是對文本的每一行數據進行匹配後操作,比如按行、按欄位
  • 一些命令行小技巧:wc、sort、sed 和 tr | Linux 中國
    讓我們來看看一些命令行實用工具,當你熱衷於終端而不是 GUI 時,它們可能更順手。我們都知道在一個系統上使用終端會更高效。當你編輯和排版一個文本文件時,終端會讓你確切的感受到,生活如此簡單。本文將向你介紹 wc、sort、tr 和 sed 命令。wcwc 是一個實用工具,全稱是 「word count」。
  • LFCS 系列第一講:如何在 Linux 上使用 GNU sed 等命令來創建、編輯和操作文件
    # sed -n '/^Jun  8/ p' /var/log/messages | sed -n 1,5p請注意,在默認的情況下,sed 會列印每一行。我們可以使用 -n 選項來覆蓋這一行為並且告訴 sed 只需要列印(用 p來表示)文件(或管道)中匹配的部分(第一個命令中指定以「Jun 8」 開頭的行,第二個命令中指定一到五行)。
  • Linux必知必會sed命令教程
    -e,如果需要用 sed 對文本內容進行多種操作,則需要執行多條子命令來進行操作;-i,默認 sed 只會處理模式空間的副本內容,不會直接修改文件,如果需要修改文件,就要指定 -i 選項;-f,如果命令操作比較多時,用 -e 會有點力不從心,這時需要把多個子命令寫入腳本文件,使用 -f 選項指定執行該腳本;-r:如果需要支持擴展正則表達式,那麼需要添加
  • 海量數據處理之cut、awk、sed命令詳解,數據分析必備技能,不難
    數據都存儲在文件中,文件中肉眼可見的數據無非就是各種有規則的字符的組合,比如日誌文件,小文件我們還可以認真閱讀,但是給你一個10M大小的數據文件,不亞於閱讀一本小說,更何況密密麻麻都是數據,我們可以通過cut、awk、sed這三個命令從規則文件中提取符合我們需要的數據,重要的是他們的運行速度非常的塊。
  • 如何使用Linux sed命令進行字符串替換
    Linux中sed命令功能強大,本文將詳細介紹如何使用sed命令進行字符串替換。一、基本的替換命令格式1:sed 's/原字符串/新字符串/' 文件命令格式2:sed 's/原字符串/新字符串/g' 文件這兩種命令格式的區別在於是否有個「g」。沒有「g」表示只替換第一個匹配到的字符串,有「g」表示替換所有能匹配到的字符串,「g」可以認為是「global」(全局的)的縮寫,沒有「全局的」結尾就不要替換全部,這樣就好記啦。
  • Linux 上 12 個高效的文本過濾命令
    $ man awk2、 sed 命令sed[3] 是一款過濾和轉換文本的強大的流編輯器。我們已經寫了兩篇關於 sed 的有用的文章,你可以通過這兒來了解:sed 的 man 手冊已經添加控制選項和說明:$ man sed3、 grep、 egrep、 fgrep、 rgrep 命令行這些過濾器輸出匹配指定模式的行。它們從一個文件或者標準輸入讀取行,並且輸出所有匹配的行,默認輸出到標準輸出。
  • Linux命令之六 cut命令
    收錄於話題 #linux
  • Linux cut 命令詳解
    在本文中,我們通過一些例子來了解 cut 命令的使用,這些使用方法在我們的日常工作中也是非常常用的。$ cut OPTION... [FILE]...我們先來了解一下 cut 的一些選項,cut 命令必須要指定選項才能執行。-f :  提取指定的欄位,cut 命令使用 Tab 作為默認的分隔符。
  • 面試題linux命令之awk
    無論是在測試還是開發崗位的面試招聘中,都會被提問到:是否了解linux系統,經常使用linux命令有哪些,接著可能會出一道題目,找出下列文本中的哪些值
  • Linux常用命令 awk 入門基礎教程
    在使用awk命令的過程中,可以使用邏輯操作符「&&」和「||」;也可以進行簡單的數學運算,如+ 、-、、/、%、^分別表示加、減、乘、除、取餘、乘方。**awk從輸入文件或者標準輸入中讀入信息,與sed一樣,信息的讀入也是逐行讀取的。不同的是,awk命令將文本文件中的一行視為一個記錄,而將一行中的某一部分(列)作為記錄的一個欄位。
  • 每天一個 Linux 命令(31): /etc/group文件詳解
    linux /etc/group文件是有關於系統管理員對用戶和用戶組管理的文件,linux用戶組的所有信息都存放在/etc/group文件中。具有某種共同特徵的用戶集合起來就是用戶組(Group)。用戶組(Group)配置文件主要有 /etc/group和/etc/gshadow,其中/etc/gshadow是/etc/group的加密信息文件。
  • linux命令大全
    Linux命令大全之所以有存在的必要就是因為,linux作為非主流市場裡面的主流作業系統,不僅是免費的而且它還是一個非常優秀的作業系統,與MS-WINDOWS相比,可靠、 穩定、速度快。且擁有豐富的根據UNIX版本改進的強大功能。