大數(shù)據(jù)技術(shù)AI Flink/Spark/Hadoop/數(shù)倉，數(shù)據(jù)分析、面試，源碼解讀等干貨學(xué)習(xí)資料 98篇原創(chuàng)內(nèi)容 -->
公眾號
linux sed 命令是利用腳本來處理文本文件。
sed 可依照腳本的指令來處理、編輯文本文件。
Sed 主要用來自動編輯一個或多個文件、簡化對文件的反復(fù)操作、編寫轉(zhuǎn)換程序等。
1 語法
sed [-hnV][-e<script>][-f<script文件>][文本文件]
1.1 參數(shù)說明
- -e<script>或--expression=<script> 以選項中指定的script來處理輸入的文本文件。
- -f<script文件>或--file=<script文件> 以選項中指定的script文件來處理輸入的文本文件。
- -h或--help 顯示幫助。
- -n或--quiet或--silent 僅顯示script處理后的結(jié)果。
- -V或--version 顯示版本信息。
1.2 動作說明
- a ：新增， a 的后面可以接字串，而這些字串會在新的一行出現(xiàn)(目前的下一行)～
- c ：取代， c 的后面可以接字串，這些字串可以取代 n1,n2 之間的行！
- d ：刪除，因為是刪除啊，所以 d 后面通常不接任何咚咚；
- i ：插入， i 的后面可以接字串，而這些字串會在新的一行出現(xiàn)(目前的上一行)；
- p ：打印，亦即將某個選擇的數(shù)據(jù)印出。通常 p 會與參數(shù) sed -n 一起運行～
- s ：取代，可以直接進行取代的工作哩！通常這個 s 的動作可以搭配正規(guī)表示法！例如 1,20s/old/new/g 就是啦！
2、以行為單位的新增/刪除
2.1 將 passwd 復(fù)制一份， 并將他內(nèi)容列出并且列印行號，同時，請將第 2~5 行刪除！
[root@hadoop01 root]$ nl passwd
1 root:x:0:0:root:/root:/bin/bash
2 bin:x:1:1:bin:/bin:/sbin/nologin
3 daemon:x:2:2:daemon:/sbin:/sbin/nologin
4 halt:x:7:0:halt:/sbin:/sbin/halt
5 mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
6 ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
7 nobody:x:99:99:Nobody:/:/sbin/nologin
8 sssd:x:997:995:User for sssd:/:/sbin/nologin
9 polkitd:x:996:994:User for polkitd:/:/sbin/nologin
10 Apache:x:48:48:Apache:/usr/share/httpd:/sbin/nologin
11 abrt:x:173:173::/etc/abrt:/sbin/nologin
12 rpc:x:32:32:Rpcbind Daemon:/var/lib/rpcbind:/sbin/nologin
13 unbound:x:994:992:Unbound DNS resolver:/etc/unbound:/sbin/nologin
14 memcached:x:993:991:Memcached daemon:/run/memcached:/sbin/nologin
15 rpcuser:x:29:29:RPC Service User:/var/lib/nfs:/sbin/nologin
[root@hadoop01 root]$ nl passwd | sed '2,5 d'
1 root:x:0:0:root:/root:/bin/bash
6 ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
7 nobody:x:99:99:Nobody:/:/sbin/nologin
8 sssd:x:997:995:User for sssd:/:/sbin/nologin
9 polkitd:x:996:994:User for polkitd:/:/sbin/nologin
10 apache:x:48:48:Apache:/usr/share/httpd:/sbin/nologin
11 abrt:x:173:173::/etc/abrt:/sbin/nologin
12 rpc:x:32:32:Rpcbind Daemon:/var/lib/rpcbind:/sbin/nologin
13 unbound:x:994:992:Unbound DNS resolver:/etc/unbound:/sbin/nologin
14 memcached:x:993:991:Memcached daemon:/run/memcached:/sbin/nologin
15 rpcuser:x:29:29:RPC Service User:/var/lib/nfs:/sbin/nologin
sed 的動作為 '2,5d' ，那個 d 就是刪除！因為 2-5 行給他刪除了，所以顯示的數(shù)據(jù)就沒有 2-5 行
另外，注意一下，原本應(yīng)該是要下達 sed -e 才對，沒有 -e 也行！同時也要注意的是， sed 后面接的動作，請務(wù)必以 '' 兩個單引號括住喔！
2.2 只要刪除第 2 行
[root@hadoop01 root]$ nl passwd | sed '2d'
1 root:x:0:0:root:/root:/bin/bash
3 daemon:x:2:2:daemon:/sbin:/sbin/nologin
4 halt:x:7:0:halt:/sbin:/sbin/halt
5 mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
6 ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
7 nobody:x:99:99:Nobody:/:/sbin/nologin
8 sssd:x:997:995:User for sssd:/:/sbin/nologin
9 polkitd:x:996:994:User for polkitd:/:/sbin/nologin
10 apache:x:48:48:Apache:/usr/share/httpd:/sbin/nologin
11 abrt:x:173:173::/etc/abrt:/sbin/nologin
12 rpc:x:32:32:Rpcbind Daemon:/var/lib/rpcbind:/sbin/nologin
13 unbound:x:994:992:Unbound DNS resolver:/etc/unbound:/sbin/nologin
14 memcached:x:993:991:Memcached daemon:/run/memcached:/sbin/nologin
15 rpcuser:x:29:29:RPC Service User:/var/lib/nfs:/sbin/nologin
2.3 在第二行后(亦即是加在第三行)加上『hadoop』字樣！
[root@hadoop01 root]$ nl passwd | sed '2a hadoop'
1 root:x:0:0:root:/root:/bin/bash
2 bin:x:1:1:bin:/bin:/sbin/nologin
hadoop
3 daemon:x:2:2:daemon:/sbin:/sbin/nologin
2.4 在第二行前
[root@hadoop01 root]$ nl passwd | sed '2i hadoop'
1 root:x:0:0:root:/root:/bin/bash
hadoop
2 bin:x:1:1:bin:/bin:/sbin/nologin
3 daemon:x:2:2:daemon:/sbin:/sbin/nologin
2.5 增加兩行以上，在第二行后面加入兩行字
[root@hadoop01 root]$ nl passwd | sed '2a hadoop
> scala'
1 root:x:0:0:root:/root:/bin/bash
2 bin:x:1:1:bin:/bin:/sbin/nologin
hadoop
scala
3 daemon:x:2:2:daemon:/sbin:/sbin/nologin
每一行之間都必須要以反斜杠『 』來進行新行的添加喔！所以，上面的例子中，我們可以發(fā)現(xiàn)在第一行的最后面就有 存在。
3、以行為單位的替換與顯示
3.1 將第2-5行的內(nèi)容取代成為『hello world』
[root@hadoop01 root]$ nl passwd | sed '2,5c hello world'
1 root:x:0:0:root:/root:/bin/bash
hello world
6 ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
4、數(shù)據(jù)的搜尋并顯示
4.1 root關(guān)鍵字的行
[root@hadoop01 root]$ nl passwd | sed '/root/p'
1 root:x:0:0:root:/root:/bin/bash
1 root:x:0:0:root:/root:/bin/bash
2 bin:x:1:1:bin:/bin:/sbin/nologin
3 daemon:x:2:2:daemon:/sbin:/sbin/nologin
4 halt:x:7:0:halt:/sbin:/sbin/halt
5 mail:x:8:12:mail:/var/spool/mail:/sbin/nologin
6 ftp:x:14:50:FTP User:/var/ftp:/sbin/nologin
7 nobody:x:99:99:Nobody:/:/sbin/nologin
8 sssd:x:997:995:User for sssd:/:/sbin/nologin
9 polkitd:x:996:994:User for polkitd:/:/sbin/nologin
10 apache:x:48:48:Apache:/usr/share/httpd:/sbin/nologin
11 abrt:x:173:173::/etc/abrt:/sbin/nologin
12 rpc:x:32:32:Rpcbind Daemon:/var/lib/rpcbind:/sbin/nologin
13 unbound:x:994:992:Unbound DNS resolver:/etc/unbound:/sbin/nologin
14 memcached:x:993:991:Memcached daemon:/run/memcached:/sbin/nologin
15 rpcuser:x:29:29:RPC Service User:/var/lib/nfs:/sbin/nologin
如果root找到，除了輸出所有行，還會輸出匹配行。
使用-n的時候?qū)⒅淮蛴“０宓男?/strong>。
[root@hadoop01 root]$ nl passwd | sed -n '/root/p'
1 root:x:0:0:root:/root:/bin/bash
5、數(shù)據(jù)的搜尋并刪除
5.1 刪除/passwd所有包含root的行，其他行輸出
[root@hadoop01 root]$ nl passwd | sed '/root/d'
2 bin:x:1:1:bin:/bin:/sbin/nologin
6、數(shù)據(jù)的搜尋并執(zhí)行命令
6.1 搜索passwd,找到root對應(yīng)的行，執(zhí)行后面花括號中的一組命令，每個命令之間用分號分隔，這里把root替換為hadoop，再輸出這行：
- p:打印所有的；
- q：打印匹配的
[root@hadoop01 root]$ nl passwd | sed '/root/{s/root/hadoop/;p;q;}'
1 hadoop:x:0:0:root:/root:/bin/bash
1 hadoop:x:0:0:root:/root:/bin/bash
[root@hadoop01 root]$ nl passwd | sed '/root/{s/root/hadoop/;p}'
1 hadoop:x:0:0:root:/root:/bin/bash
1 hadoop:x:0:0:root:/root:/bin/bash
2 bin:x:1:1:bin:/bin:/sbin/nologin
3 daemon:x:2:2:daemon:/sbin:/sbin/nologin
...
7、數(shù)據(jù)的搜尋并替換
除了整行的處理模式之外， sed 還可以用行為單位進行部分數(shù)據(jù)的搜尋并取代?；旧?sed 的搜尋與替代的與 vi 相當?shù)念愃?/p>
sed 's/要被取代的字串/新的字串/g'
7.0 只要第一行的數(shù)字部分
[root@hadoop01 root]$ nl passwd | sed -n '/root/p'
1 root:x:0:0:root:/root:/bin/bash
7.1 刪除第一行，數(shù)字前半部分
[root@hadoop01 root]$ nl passwd | sed -n '/root/p' | sed 's/^.*x://g'
0:0:root:/root:/bin/bash
s/后面的字符串是包含的關(guān)系
7.2 刪除第一行，數(shù)字后半部分
[root@hadoop01 root]$ nl passwd | sed -n '/root/p' | sed 's/^.*x://g' | sed 's/:root.*$//g'
0:0
8、多點編輯
8.1 一條sed命令，刪除passwd第四行到末尾的數(shù)據(jù)，并把root替換為hadoop
[root@hadoop01 root]$ nl passwd | sed -e '4,$d'
1 root:x:0:0:root:/root:/bin/bash
2 bin:x:1:1:bin:/bin:/sbin/nologin
3 daemon:x:2:2:daemon:/sbin:/sbin/nologin
[root@hadoop01 root]$ nl passwd | sed -e '4,$d' -e 's/sbin/hadoop/g'
1 root:x:0:0:root:/root:/bin/bash
2 bin:x:1:1:bin:/bin:/hadoop/nologin
3 daemon:x:2:2:daemon:/hadoop:/hadoop/nologin
-e表示多點編輯，第一個編輯命令刪除passwd第三行到末尾的數(shù)據(jù)，第二條命令搜索root替換為hadoop
9、直接修改文件內(nèi)容(危險動作)
9.1 sed 將 passwd 內(nèi)每一行結(jié)尾若為 nologin 則換成 hadoop
[root@hadoop01 root]$ sed -i 's/nologin$/hadoop/g' passwd
[root@hadoop01 root]$ nl passwd
1 root:x:0:0:root:/root:/bin/bash
2 bin:x:1:1:bin:/bin:/sbin/hadoop
3 daemon:x:2:2:daemon:/sbin:/sbin/hadoop
4 halt:x:7:0:halt:/sbin:/sbin/halt
5 mail:x:8:12:mail:/var/spool/mail:/sbin/hadoop
6 ftp:x:14:50:FTP User:/var/ftp:/sbin/hadoop
7 nobody:x:99:99:Nobody:/:/sbin/hadoop
8 sssd:x:997:995:User for sssd:/:/sbin/hadoop
9 polkitd:x:996:994:User for polkitd:/:/sbin/hadoop
10 apache:x:48:48:Apache:/usr/share/httpd:/sbin/hadoop
...
9.2 sed 將 passwd 內(nèi)每二行替換為 --hello world
[root@hadoop01 root]$ sed -i '2c --hello world' passwd
[root@hadoop01 root]$ nl passwd
1 root:x:0:0:root:/root:/bin/bash
2 --hello world
3 daemon:x:2:2:daemon:/sbin:/sbin/hadoop
4 halt:x:7:0:halt:/sbin:/sbin/halt
5 mail:x:8:12:mail:/var/spool/mail:/sbin/hadoop
