sed命令的基礎知識及簡單應用

2021-01-07 知行網絡

Sed是一Linux命令,全稱:Stream Editor,功能和awk類似,但是沒有awk功能強大,相對簡單,awk處理列的功能比awk差很多。Sed主要用於自動編輯一個或者多個文件,多用於腳本中對文件的處理。

Sed命令對文件的進行增加、刪除、修改和查找操作,所以是學好sed命令是寫自動化腳本必須的基礎之一。

sed先讀取(從輸入中讀取某一行),再執行(在某一行上執行sed命令),再再顯示(把結果顯示在輸出中);默認是顯示修改後內容,不會修改原文件,除非使用-i 參數。

命令格式:

sed [options] 'command' file(s)

sed [options] -f scriptfile file(s)

主要選項:

-e<script>或--expression=<script>:以選項中的指定的script來處理輸入的文本文件;

-f<script文件>或--file=<script文件>:以選項中指定的script文件來處理輸入的文本文件;

-h或--help:顯示幫助;

-i:此選項會直接修改源文件,要慎用。

-n或--quiet或——silent:僅顯示script處理後的結果;

-V或--version:顯示版本信息。

命令:

a\ 在當前行下面插入文本。

i\ 在當前行上面插入文本。

c\ 把選定的行改為新的文本。

d 刪除,刪除選擇的行。

D 刪除模板塊的第一行。

s 替換指定字符

h 拷貝模板塊的內容到內存中的緩衝區。

H 追加模板塊的內容到內存中的緩衝區。

g 獲得內存緩衝區的內容,並替代當前模板塊中的文本。

G 獲得內存緩衝區的內容,並追加到當前模板塊文本的後面。

l 列表不能列印字符的清單。

n 讀取下一個輸入行,用下一個命令處理新的行而不是用第一個命令。

N 追加下一個輸入行到模板塊後面並在二者間嵌入一個新行,改變當前行號碼。

p 列印模板塊的行。

P(大寫) 列印模板塊的第一行。

q 退出Sed。

b lable 分支到腳本中帶有標記的地方,如果分支不存在則分支到腳本的末尾。

r file 從file中讀行。

t label if分支,從最後一行開始,條件一旦滿足或者T,t命令,將導致分支到帶有標號的命令處,或者到腳本的末尾。

T label 錯誤分支,從最後一行開始,一旦發生錯誤或者T,t命令,將導致分支到帶有標號的命令處,或者到腳本的末尾。

w file 寫並追加模板塊到file末尾。

W file 寫並追加模板塊的第一行到file末尾。

! 表示後面的命令對所有沒有被選定的行發生作用。

= 列印當前行號碼。

# 把注釋擴展到下一個換行符以前。

元字符集:

^ 匹配行開始,如:/^sed/匹配所有以sed開頭的行。

$ 匹配行結束,如:/sed$/匹配所有以sed結尾的行。

. 匹配一個非換行符的任意字符,如:/s.d/匹配s後接一個任意字符,最後是d。

* 匹配0個或多個字符,如:/*sed/匹配所有模板是一個或多個空格後緊跟sed的行。

[] 匹配一個指定範圍內的字符,如/[ss]ed/匹配sed和Sed。

[^] 匹配一個不在指定範圍內的字符,如:/[^A-RT-Z]ed/匹配不包含A-R和T-Z的一個字母開頭,緊跟ed的行。

\(..\) 匹配子串,保存匹配的字符,如s/\(love\)able/\1rs,loveable被替換成lovers。

& 保存搜索字符用來替換其他字符,如s/love/**&**/,love這成**love**。

\< 匹配單詞的開始,如:/\<love/匹配包含以love開頭的單詞的行。

\> 匹配單詞的結束,如/love\>/匹配包含以love結尾的單詞的行。

x\{m\} 重複字符x,m次,如:/0\{5\}/匹配包含5個0的行。

x\{m,\} 重複字符x,至少m次,如:/0\{5,\}/匹配至少有5個0的行。

x\{m,n\} 重複字符x,至少m次,不多於n次,如:/0\{5,10\}/匹配5~10個0的行。

實例1:替換操作

sed 's/beitihuanneirong/tihuanneirong/' lxt.txt #顯示所有行,替換每一行第一個配的內容

sed -n 's/beitihuanneirong/tihuanneirong/p' lxt.txt #只顯示有替換替換的行,並且只替換每一行的第一個匹配內容

sed -i 's/beitihuanneirong/tihuanneirong/' lxt.txt #替換所有每行第一個匹配的內容,並且寫入到文件中,請謹慎操作,並提前備份,不然後悔莫及。

sed -i 's/beitihuanneirong/tihuanneirong/g' lxt.txt#替換每行的所有匹配,並寫入文件

sed 's/beitihuanneirong/tihuanneirong/2g' lxt.txt#從每行的第2處開始替換,並顯示

實例2:刪除行

sed '/^$/d' lxt.txt #刪除空白行

sed '2d' lxt.txt #刪除第2行

sed '2,$d' lxt.txt #刪除第2到最後的所有行

sed '$d' lxt.txt #刪除最後一行

sed '/^jinxing/'d lxt.txt #刪除jinxing開頭的行

實例3:多行編輯

sed -e '1,3d' -e 's/jinxing/zhongguo/' -e '/^$/d' lxt.txt#刪除1至3行,替換jixning為zhongguo,刪除空行

實例4:顯示特定行

sed -n '1~2p' lxt.txt#顯示奇數行,也可以用'p;n』替換'1~2p'

sed -n '2~2p' lxt.txt#顯示偶數行,也可以用'n;p'替換 '2~2p'

sed -n '2,5p' lxt.txt #顯示2到5行

相關焦點

  • Linux必知必會sed命令教程
    為了能夠讓大部分朋友比較輕鬆地學習本文知識,這裡還是簡單介紹下正則表達式的基本內容。如果是專門做正則編程開發的,可以去買本正則的書籍來看。(一)基本正則表達式.,表示匹配任意一個字符,除了換行符,類似 Shell 通配符中的 ?;*,表示前邊字符有 0 個或多個;.
  • Linux常用命令 - sed
    使用 sed 搜索和替換文本的一般形式如下:sed -i 's/SEARCH_REGEX/REPLACEMENT/g' INPUTFILE-i 將其輸出寫入標準輸出seds 替代命令,可能是 sed 中使用最多的命令-/分隔符字符。
  • Linux 三劍客 Awk、Sed、Grep 命令詳解
    Linux三劍客Awk命令詳解命令名稱Awk  pattern scanning and processing language命令作用對文本和數據進行處理數據可以來自標準輸(stdin)、一個或多個文件,或其它命令的輸出。它在命令行中使用,但更多是作為腳本來使用。awk有很多內建的功能,比如數組、函數等,這是它和C語言的相同之處,靈活性是awk最大的優勢。
  • 如何使用Linux sed命令進行字符串替換
    Linux中sed命令功能強大,本文將詳細介紹如何使用sed命令進行字符串替換。一、基本的替換命令格式1:sed 's/原字符串/新字符串/' 文件命令格式2:sed 's/原字符串/新字符串/g' 文件這兩種命令格式的區別在於是否有個「g」。沒有「g」表示只替換第一個匹配到的字符串,有「g」表示替換所有能匹配到的字符串,「g」可以認為是「global」(全局的)的縮寫,沒有「全局的」結尾就不要替換全部,這樣就好記啦。
  • 上古神器 sed 教程詳解,小白也能看的懂
    為了能夠讓大部分朋友比較輕鬆地學習本文知識,這裡還是簡單介紹下正則表達式的基本內容。如果是專門做正則編程開發的,可以去買本正則的書籍來看。(一)基本正則表達式.,表示匹配任意一個字符,除了換行符,類似 Shell 通配符中的 ?;*,表示前邊字符有 0 個或多個;.
  • 海量數據處理之cut、awk、sed命令詳解,數據分析必備技能,不難
    數據都存儲在文件中,文件中肉眼可見的數據無非就是各種有規則的字符的組合,比如日誌文件,小文件我們還可以認真閱讀,但是給你一個10M大小的數據文件,不亞於閱讀一本小說,更何況密密麻麻都是數據,我們可以通過cut、awk、sed這三個命令從規則文件中提取符合我們需要的數據,重要的是他們的運行速度非常的塊。
  • 軟體測試基礎之linux常用命令
    其核心防火牆組件性能高效、配置簡單,保證了系統的安全。在很多企業網絡中,為了追求速度和安全,Linux不僅僅是被網絡運維人員當作伺服器使用,Linux既可以當作伺服器,又可以當作網絡防火牆是Linux的 一大亮點。Linux 具有開放源碼、沒有版權、技術社區用戶多等特點 ,開放源碼使得用戶可以自由裁剪,靈活性高,功能強大,成本低。
  • sed命令使用的幾點技巧整理
    1) 統計出了給定文本出現的單詞及次數:sed 's/ /\n/g' test.log | sort | uniq -c2) 選定起始、間隔行進行輸出:nl test2.txt | sed -n '1~2p' 等價於: nl test2.txt
  • 一篇文章學會shell工具篇之sed
    sed工具執行原理; 有關sed的參數及action的常見操作方法; 定址; 模式空間和保持空間; 使用標籤 1.首先先來了解一下什麼是sed?
  • Linux三大劍客之sed(上)
    3.2 命令行選項完整格式調用sed:sed OPTIONS... [SCRIPT] [INPUTFILE...]sed可能被以下命令行選項調用: --version:列印版本信息。--help:列印簡要幫助信息並退出。
  • 使用Sensu簡單有效地監控雲基礎架構
    Sensu開源解決方案可以簡單有效地監控雲基礎架構。Sensu是一種開源基礎架構和應用程式監控解決方案,可監控伺服器,服務和應用程式運行狀況,並通過第三方集成發送警報和通知。如果想以簡單有效的方式監控雲基礎架構,Sensu是一個不錯的選擇。它可以與你的組織可能已經使用的許多現代DevOps堆棧集成,例如Slack,HipChat或IRC,甚至可以使用PagerDuty發送移動/尋呼機警報。
  • shell實現鹼基/胺基酸序列提取(sed,grep,awk三大利器走向天下)
    隨後,輸入如下命令:while read line;doneed1=`sed -n "/${line} /,/^@/p -n  "/^$need3/,/^@/p" file.fa > ${line}.fased -i '/^@/d' ${line}.fadone < genename以上命令即可一次性提取多個基因。
  • Shell常用命令,太全了,建議收藏
    Vi常用命令(查看原圖)Shell基本命令
  • 淺談Liunx常用命令
    * 作用顯示磁碟分區上的可使用的磁碟空間* 格式df [options] 目錄* 主要參數說明options:-h或--human-readable:以可讀性較高的方式來顯示信息-a或--all:包含全部的文件系統25. sed命令* 作用流編輯器* 格式sed [options]
  • 這10個命令行工具完爆Excel
    很多命令行工具也不是嚴格限制於Linux,其它類似於Unix作業系統的用戶也可以加安裝,其中還有很多是包含在GNU Coreutils軟體包中,有些需要單獨維護,而有些可以直接在Windows上使用。下面我們就來簡單嘗試使用一些開源工具進行數據分析(下文中我們採用的例子來自於1月發布在Opensource.com的CSV文件)。
  • 12個基本命令行工具幫你擺脫滑鼠
    這些固然都是最基礎的操作命令,但我還是鼓勵你針對某些命令行自行查找更多的應用實例。在本文中,工具名都可以直接連結到維基百科詞條,而不是Linux的使用手冊頁面,我覺得前者對於新手來說更友好一點。當你需要花大量的時間進行文本處理時,grep無疑是你需要掌握的一個好工具,更多有用的信息請參考網站:https://www.thegeekstuff.com/2009/03/15-practical-unix-grep-command-examplessedsed是一個流編輯器,也是一個文本處理和轉換工具
  • 提升開發效率N倍的20+命令行神器
    題目叫 「Shell 助力開發效率提升」,更切題的應該是叫「命令行」提升開發效率,這裡並沒有講到 Shell 編程,而是主要介紹 Linux 或者 Mac 下常用的一些基本工具命令來幫助處理一些日常事務。
  • 這個50個必備的基礎命令一定要掌握!
    4. ssh登錄到遠程主機$ ssh -l jsmith remotehost.example.com調試ssh客戶端$ ssh -v -l jsmith remotehost.example.com顯示ssh客戶端版本$ ssh -V5. sed
  • 生信入門必須掌握的30個Linux命令
    -m  顯示類似於more命令的百分比-N  顯示行號-S  格式化顯示$ less -S nt.tar.gz13、head / tail 這兩個命令比較簡單,只是取一個文件的頭部和尾部多少行,默認10行,可以加-n進行設置,利用管道可以取文件中間行。
  • Linux 上 12 個高效的文本過濾命令
    $ man awk2、 sed 命令sed[3] 是一款過濾和轉換文本的強大的流編輯器。我們已經寫了兩篇關於 sed 的有用的文章,你可以通過這兒來了解:sed 的 man 手冊已經添加控制選項和說明:$ man sed3、 grep、 egrep、 fgrep、 rgrep 命令行這些過濾器輸出匹配指定模式的行。它們從一個文件或者標準輸入讀取行,並且輸出所有匹配的行,默認輸出到標準輸出。