大數據技術AI Flink/Spark/Hadoop/數倉，數據分析、面試，源碼解讀等干貨學習資料 98篇原創內容 -->

公眾號

linux sed 命令是利用腳本來處理文本文件。

sed 可依照腳本的指令來處理、編輯文本文件。

Sed 主要用來自動編輯一個或多個文件、簡化對文件的反復操作、編寫轉換程序等。

1 語法

 sed [-hnV][-e<script>][-f<script文件>][文本文件]

1.1 參數說明

• -e<script>或--expression=<script> 以選項中指定的script來處理輸入的文本文件。
• -f<script文件>或--file=<script文件> 以選項中指定的script文件來處理輸入的文本文件。
• -h或--help 顯示幫助。
• -n或--quiet或--silent 僅顯示script處理后的結果。
• -V或--version 顯示版本信息。

1.2 動作說明

• a ：新增， a 的后面可以接字串，而這些字串會在新的一行出現(目前的下一行)～
• c ：取代， c 的后面可以接字串，這些字串可以取代 n1,n2 之間的行！
• d ：刪除，因為是刪除啊，所以 d 后面通常不接任何咚咚；
• i ：插入， i 的后面可以接字串，而這些字串會在新的一行出現(目前的上一行)；
• p ：打印，亦即將某個選擇的數據印出。通常 p 會與參數 sed -n 一起運行～
• s ：取代，可以直接進行取代的工作哩！通常這個 s 的動作可以搭配正規表示法！例如 1,20s/old/new/g 就是啦！

2、以行為單位的新增/刪除

2.1 將 passwd 復制一份， 并將他內容列出并且列印行號，同時，請將第 2~5 行刪除！

 [root@hadoop01 root]$   nl passwd
      1 root:x:0:0:root:/root:/bin/bash
      2 bin:x:1:1:bin:/bin:/sbin/nologin
      3 daemon:x:2:2:daemon:/sbin:/sbin/nologin
      4 halt:x:7:0:halt:/sbin:/sbin/halt
      5 mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
      6 ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
      7 nobody:x:99:99:Nobody:/:/sbin/nologin
      8 sssd:x:997:995:User for sssd:/:/sbin/nologin
      9 polkitd:x:996:994:User for polkitd:/:/sbin/nologin
    10 Apache:x:48:48:Apache:/usr/share/httpd:/sbin/nologin
    11 abrt:x:173:173::/etc/abrt:/sbin/nologin
    12 rpc:x:32:32:Rpcbind Daemon:/var/lib/rpcbind:/sbin/nologin
    13 unbound:x:994:992:Unbound DNS resolver:/etc/unbound:/sbin/nologin
    14 memcached:x:993:991:Memcached daemon:/run/memcached:/sbin/nologin
    15 rpcuser:x:29:29:RPC Service User:/var/lib/nfs:/sbin/nologin
 
 
 [root@hadoop01 root]$ nl passwd | sed '2,5 d'
      1 root:x:0:0:root:/root:/bin/bash
      6 ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
      7 nobody:x:99:99:Nobody:/:/sbin/nologin
      8 sssd:x:997:995:User for sssd:/:/sbin/nologin
      9 polkitd:x:996:994:User for polkitd:/:/sbin/nologin
    10 apache:x:48:48:Apache:/usr/share/httpd:/sbin/nologin
    11 abrt:x:173:173::/etc/abrt:/sbin/nologin
    12 rpc:x:32:32:Rpcbind Daemon:/var/lib/rpcbind:/sbin/nologin
    13 unbound:x:994:992:Unbound DNS resolver:/etc/unbound:/sbin/nologin
    14 memcached:x:993:991:Memcached daemon:/run/memcached:/sbin/nologin
    15 rpcuser:x:29:29:RPC Service User:/var/lib/nfs:/sbin/nologin

sed 的動作為 '2,5d' ，那個 d 就是刪除！因為 2-5 行給他刪除了，所以顯示的數據就沒有 2-5 行

另外，注意一下，原本應該是要下達 sed -e 才對，沒有 -e 也行！同時也要注意的是， sed 后面接的動作，請務必以 '' 兩個單引號括住喔！

2.2 只要刪除第 2 行

 [root@hadoop01 root]$   nl passwd | sed '2d'
      1 root:x:0:0:root:/root:/bin/bash
      3 daemon:x:2:2:daemon:/sbin:/sbin/nologin
      4 halt:x:7:0:halt:/sbin:/sbin/halt
      5 mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
      6 ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
      7 nobody:x:99:99:Nobody:/:/sbin/nologin
      8 sssd:x:997:995:User for sssd:/:/sbin/nologin
      9 polkitd:x:996:994:User for polkitd:/:/sbin/nologin
    10 apache:x:48:48:Apache:/usr/share/httpd:/sbin/nologin
    11 abrt:x:173:173::/etc/abrt:/sbin/nologin
    12 rpc:x:32:32:Rpcbind Daemon:/var/lib/rpcbind:/sbin/nologin
    13 unbound:x:994:992:Unbound DNS resolver:/etc/unbound:/sbin/nologin
    14 memcached:x:993:991:Memcached daemon:/run/memcached:/sbin/nologin
    15 rpcuser:x:29:29:RPC Service User:/var/lib/nfs:/sbin/nologin

2.3 在第二行后(亦即是加在第三行)加上『hadoop』字樣！

 [root@hadoop01 root]$ nl passwd | sed '2a hadoop'
      1 root:x:0:0:root:/root:/bin/bash
      2 bin:x:1:1:bin:/bin:/sbin/nologin
 hadoop
      3 daemon:x:2:2:daemon:/sbin:/sbin/nologin
 

2.4 在第二行前

 [root@hadoop01 root]$ nl passwd | sed '2i hadoop'
      1 root:x:0:0:root:/root:/bin/bash
 hadoop
      2 bin:x:1:1:bin:/bin:/sbin/nologin
      3 daemon:x:2:2:daemon:/sbin:/sbin/nologin

2.5 增加兩行以上，在第二行后面加入兩行字

 [root@hadoop01 root]$ nl passwd | sed '2a hadoop 
 > scala'
      1 root:x:0:0:root:/root:/bin/bash
      2 bin:x:1:1:bin:/bin:/sbin/nologin
 hadoop
 scala
      3 daemon:x:2:2:daemon:/sbin:/sbin/nologin
 

每一行之間都必須要以反斜杠『 』來進行新行的添加喔！所以，上面的例子中，我們可以發現在第一行的最后面就有 存在。

3、以行為單位的替換與顯示

3.1 將第2-5行的內容取代成為『hello world』

 
 [root@hadoop01 root]$ nl passwd | sed '2,5c hello world'
      1 root:x:0:0:root:/root:/bin/bash
 hello world
      6 ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
 

4、數據的搜尋并顯示

4.1 root關鍵字的行

 [root@hadoop01 root]$ nl passwd | sed '/root/p'
      1 root:x:0:0:root:/root:/bin/bash
      1 root:x:0:0:root:/root:/bin/bash
      2 bin:x:1:1:bin:/bin:/sbin/nologin
      3 daemon:x:2:2:daemon:/sbin:/sbin/nologin
      4 halt:x:7:0:halt:/sbin:/sbin/halt
      5 mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
      6 ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
      7 nobody:x:99:99:Nobody:/:/sbin/nologin
      8 sssd:x:997:995:User for sssd:/:/sbin/nologin
      9 polkitd:x:996:994:User for polkitd:/:/sbin/nologin
    10 apache:x:48:48:Apache:/usr/share/httpd:/sbin/nologin
    11 abrt:x:173:173::/etc/abrt:/sbin/nologin
    12 rpc:x:32:32:Rpcbind Daemon:/var/lib/rpcbind:/sbin/nologin
    13 unbound:x:994:992:Unbound DNS resolver:/etc/unbound:/sbin/nologin
    14 memcached:x:993:991:Memcached daemon:/run/memcached:/sbin/nologin
    15 rpcuser:x:29:29:RPC Service User:/var/lib/nfs:/sbin/nologin

如果root找到，除了輸出所有行，還會輸出匹配行。

使用-n的時候將只打印包含模板的行。

 [root@hadoop01 root]$ nl passwd | sed -n '/root/p'
      1 root:x:0:0:root:/root:/bin/bash

5、數據的搜尋并刪除

5.1 刪除/passwd所有包含root的行，其他行輸出

 [root@hadoop01 root]$ nl passwd | sed '/root/d'
      2 bin:x:1:1:bin:/bin:/sbin/nologin

6、數據的搜尋并執行命令

6.1 搜索passwd,找到root對應的行，執行后面花括號中的一組命令，每個命令之間用分號分隔，這里把root替換為hadoop，再輸出這行：

1. p:打印所有的；
2. q：打印匹配的

 [root@hadoop01 root]$ nl passwd | sed '/root/{s/root/hadoop/;p;q;}'
      1 hadoop:x:0:0:root:/root:/bin/bash
      1 hadoop:x:0:0:root:/root:/bin/bash

 [root@hadoop01 root]$ nl passwd | sed '/root/{s/root/hadoop/;p}'
      1 hadoop:x:0:0:root:/root:/bin/bash
      1 hadoop:x:0:0:root:/root:/bin/bash
      2 bin:x:1:1:bin:/bin:/sbin/nologin
      3 daemon:x:2:2:daemon:/sbin:/sbin/nologin
      ...

7、數據的搜尋并替換

除了整行的處理模式之外， sed 還可以用行為單位進行部分數據的搜尋并取代。基本上 sed 的搜尋與替代的與 vi 相當的類似

 sed 's/要被取代的字串/新的字串/g'

7.0 只要第一行的數字部分

 [root@hadoop01 root]$ nl passwd | sed -n '/root/p'
      1 root:x:0:0:root:/root:/bin/bash

7.1 刪除第一行，數字前半部分

 [root@hadoop01 root]$ nl passwd | sed -n '/root/p' | sed 's/^.*x://g'
 0:0:root:/root:/bin/bash

s/后面的字符串是包含的關系

7.2 刪除第一行，數字后半部分

 [root@hadoop01 root]$ nl passwd | sed -n '/root/p' | sed 's/^.*x://g' | sed 's/:root.*$//g'
 0:0

8、多點編輯

8.1 一條sed命令，刪除passwd第四行到末尾的數據，并把root替換為hadoop

 [root@hadoop01 root]$ nl passwd | sed -e '4,$d'
      1 root:x:0:0:root:/root:/bin/bash
      2 bin:x:1:1:bin:/bin:/sbin/nologin
      3 daemon:x:2:2:daemon:/sbin:/sbin/nologin
 
 
 [root@hadoop01 root]$ nl passwd | sed -e '4,$d' -e 's/sbin/hadoop/g'
      1 root:x:0:0:root:/root:/bin/bash
      2 bin:x:1:1:bin:/bin:/hadoop/nologin
      3 daemon:x:2:2:daemon:/hadoop:/hadoop/nologin

-e表示多點編輯，第一個編輯命令刪除passwd第三行到末尾的數據，第二條命令搜索root替換為hadoop

9、直接修改文件內容(危險動作)

9.1 sed 將 passwd 內每一行結尾若為 nologin 則換成 hadoop

 [root@hadoop01 root]$ sed -i 's/nologin$/hadoop/g' passwd
 [root@hadoop01 root]$ nl passwd
      1 root:x:0:0:root:/root:/bin/bash
      2 bin:x:1:1:bin:/bin:/sbin/hadoop
      3 daemon:x:2:2:daemon:/sbin:/sbin/hadoop
      4 halt:x:7:0:halt:/sbin:/sbin/halt
      5 mail:x:8:12:mail:/var/spool/mail:/sbin/hadoop
      6 ftp:x:14:50:FTP User:/var/ftp:/sbin/hadoop
      7 nobody:x:99:99:Nobody:/:/sbin/hadoop
      8 sssd:x:997:995:User for sssd:/:/sbin/hadoop
      9 polkitd:x:996:994:User for polkitd:/:/sbin/hadoop
    10 apache:x:48:48:Apache:/usr/share/httpd:/sbin/hadoop
 ...

9.2 sed 將 passwd 內每二行替換為 --hello world

 [root@hadoop01 root]$ sed -i '2c --hello world' passwd
 [root@hadoop01 root]$ nl passwd
      1 root:x:0:0:root:/root:/bin/bash
      2 --hello world
      3 daemon:x:2:2:daemon:/sbin:/sbin/hadoop
      4 halt:x:7:0:halt:/sbin:/sbin/halt
      5 mail:x:8:12:mail:/var/spool/mail:/sbin/hadoop