聊聊Sed常用操作盤點
本文轉(zhuǎn)載自微信公眾號「新鈦云服」，作者秦鳴。轉(zhuǎn)載本文請聯(lián)系新鈦云服公眾號。
本文詳細(xì)介紹sed -n參數(shù)、-I參數(shù)、-e參數(shù)的使用，并用例子進(jìn)行說明。內(nèi)容提要：
-n參數(shù)
- 實例：選取一段時間的日志
......
-i參數(shù)
- 實例：刪除第一行
- 實例：刪除2-5行
- 實例：刪除每行最后兩個字符
- 實例：刪除每行前兩個字符
- 實例：刪除行首的空格
- 實例;刪除空行
- 第一行上添加一行內(nèi)容
- 替換內(nèi)容
......
-e參數(shù)
- -e與不加-e的區(qū)別
- 常用實例sed獲取ip
......
-n參數(shù)
只打印模式匹配的行。
實例：選取一段時間的日志
- 日期在日志中間的例子
- # sed -n '/2019-07-23 09:[0-9][0-9]:[0-9][0-9]/,/2019-07-23 11:[0-9][0-9]:[0-9][0-9]/p' 20190723_teacher.log
注意：該方法后面的時間會選取你該小時的第一條，剩余的不會選取
- 日期在日志開頭的例子:
- # sed -n '/2019-07-23 09:25:55/,/2019-07-23 10:25:55/p' accessSuccess.log
查看某時間段到現(xiàn)在的系統(tǒng)日志
- # sed -n '/Jun 21 12/,$p' /var/log/messages | less
問題：能夠根據(jù)時間來查日志的原理是什么?直接寫日期的和正則的有什么區(qū)別
原理是匹配到第一個和最后一個的全部打印出來，所以要取9點到10點的日志要打印到11點第一條就能確保9點到10點的都打出來了。直接寫日期和正則的區(qū)別是一個精確匹配一個模糊匹配。
-i參數(shù)
直接修改讀取的文件內(nèi)容，而不是輸出到終端。
實例：刪除第一行
- # sed -i '1d' 1.sql
實例：刪除2-5行
- # sed -i '2,5d' 1.sql
實例：刪除每行最后兩個字符
- # sed -i 's/..$//' 1.sql
實例：刪除每行前兩個字符
- # sed -i 's/..//' 1.sql
實例：刪除行首的空格
- # sed -i 's/^[[:space:]]*//' 1.sql
- # sed -i 's/^[ ]*//' 1.sql
- # sed -i 's/^ *//' 1.sql
實例：刪除空行
- # sed -i '/^$/d' 1.sql
刪除配置文件中//號注釋行
- # sed -i 's#//.*##g' 1.sql
刪除配置文件中#號注釋行
- # sed -i 's#\#.*##g' 1.sql
刪除最后一行
- # sed -i '$d' 1.sql
刪除第一個字符
- # sed 's/^.//g' 1.sql
第一行上添加一行內(nèi)容
- # sed -i '1i insert into adid_intention values ' 1.sql
插入字符，匹配文本中B開頭的行，行尾追加2008
- # sed -i 's/B.*/&2008/' 1.sql
插入字符，匹配文本中B開頭的行之前追加2008
- # sed -i 's/B.*/2008&/' 1.sql
替換內(nèi)容，例如將2-5行的內(nèi)容替換成case
- # sed -i '2,5c case' 1.sql
將所有以d或D開頭的行里所有的x變成X
- # sed '^[dD]/s/x/X/g' 1.sql
替換內(nèi)容，把a(bǔ)aa替換成bbb
- # sed -i 's/aaa/bbb/' 1.sql
- # sed -i 's/aaa/bbb/g' 1.sql
- # sed -i '1,\$s#bbb#aaa#g' 1.sql
- 備注：這兩種命令格式的區(qū)別在于是否有個“g”。沒有“g”表示只替換第一個匹配到的字符串，有“g”表示替換所有能匹配到的字符串，“g”可以認(rèn)為是“global”（全局的）的縮寫，第三條1代表第一行，$代表最后一行，1,$代表從第一行到最后一行
分隔符可以任意
- # sed -i 's#bbb#aaa#g' 1.sql
-e參數(shù)
-e與不加-e的區(qū)別
-e 可以在同一行里執(zhí)行多條命令，不加 -e 只有 's/11/00/g' 進(jìn)行了操作
- # sed 's/11/00/g' 's/22/99/g' 1.sql
- sed：無法讀取 s/22/99/g：沒有那個文件或目錄
- a,aaa,aaa,aaa,a00
- a,aaa,aaa,aaa,a22
- a,aaa,aaa,aaa,a00
- Ba,aaa,axa,aaa,a22
- a,aaa,aaa,aaa,a
加上 -e 時 's/11/00/g' 與 's/22/99/g' 都進(jìn)行了操作
- # sed -e 's/11/00/g' -e 's/22/99/g' 1.sql
- a,aaa,aaa,aaa,a00
- a,aaa,aaa,aaa,a99
- a,aaa,aaa,aaa,a00
- Ba,aaa,axa,aaa,a99
- a,aaa,aaa,aaa,a
常用實例：sed獲取ip
- # ifconfig en0 | sed -e '/inet /!d' //匹配inet 的不刪除
- # ifconfig en0 | sed -e '/inet /!d' -e 's/^.*inet//g' //把開頭到inet部分替換刪除
- # ifconfig en0 | sed -e '/inet /!d' -e 's/^.*inet//g' -e 's/netmask.*$//g' //把netmask到結(jié)尾替換刪除
- # ifconfig en0 | sed -e '/inet /!d' -e 's/^.*inet//g' -e 's/netmask.*$//g' -e 's/[[:space:]]*//g' //最后去掉首位空格
常用實例：處理以下文件內(nèi)容，將域名取出并根據(jù)域名進(jìn)行計數(shù)排序處理
- # cat aaa.log
- http://www.tyun.cn/index.html
- http://www.tyun.cn/1.html
- http://post.tyun.cn/index.html
- http://mp3.tyun.cn/index.html
- http://www.tyun.cn/3.html
- http://post.tyun.cn/2.html
- # sed -e 's#^.*//\(.*tyun.*\)/.*html#\1#gp' aaa.log | sort | uniq -c | sort -rn
