Linux sed 命令進階實戰：文本處理、替換、模式匹配與腳本化技巧

sed（Stream Editor）是 Linux 文本處理「三劍客」之一，以行為單位流式處理文本，零拷貝、高效能，是 Shell 腳本、日誌分析、配置管理、CI/CD 管道不可或缺的利器。本文從核心語法切入，深度解析替換、刪除、插入、模式空間/保持空間進階技巧，並提供生產級實戰範例庫。

核心語法與執行模型

sed [選項] '腳本命令' 文件...
sed [選項] -f 腳本文件 文件...
sed [選項] -e '命令1' -e '命令2' 文件...

關鍵選項

編輯命令結構

[地址範圍]命令[參數]
# 地址可為：行號、正則 /pattern/、$ (最後行)、範圍 1,10 /start/,/end/
# 命令單字母，大小寫敏感

高頻編輯命令速查表

替換命令 s 深度掌握

分隔符自由化

# 任意字符作分隔符，避免正則/替換內容含斜線需大量轉義
sed 's|/etc/nginx|/opt/nginx|g'
sed 's@https://@https://@g'
sed 's#/usr/local#/opt#g'

關鍵 Flags 組合

• g：全行所有匹配（預設僅首個）
• i / I：忽略大小寫
• p：替換成功則輸出該行（配合 -n）
• w file：替換成功的行寫入文件
• e：將替換結果作為命令執行（GNU sed 扩展，慎用）

捕獲組與後向引用

# 交換兩欄
echo "a b" | sed 's/\(.*\) \(.*\)/\2 \1/'   # 輸出: b a

# 保留關鍵字，修改其前後
sed -E 's/(ERROR|WARN)/[\1]/g' log.txt      # [ERROR] [WARN]

# 引用整個匹配 & (僅替換字符串中有效)
sed 's/pattern/&_suffix/g'

地址範圍與行選擇技巧

# 行號範圍
sed '10,20s/old/new/g'      # 第10-20行
sed '10,$s/old/new/g'       # 第10行到結尾
sed '1~2d'                  # 刪除奇數行 (GNU sed: 起始行+步長)

# 正則範圍
sed -n '/START/,/END/p'     # 輸出 START 到 END 之間的行(含邊界)
sed '/^$/d'                 # 刪除空行
sed '/^[[:space:]]*#/d'     # 刪除註釋行

# 多條件組合
sed -e '/^$/d' -e '/^#/d'   # 刪除空行和註釋行
sed '/pattern1/{/pattern2/d}' # 包含 pattern1 的行中刪除 pattern2

進階：模式空間與保持空間（多行處理核心）

sed 內部維護兩個緩衝區：

• 模式空間：當前讀入的行（或多行），編輯命令作用於此。
• 保持空間：用戶可控的暫存區，跨行傳遞數據。

經典多行場景：合併續行（以 \ 結尾的行）

# 輸入文件:
# line1 \
# line2 \
# line3
# line4

sed ':a; /\\$/N; s/\\\n//; ta' file
# 解析:
# :a          定義標籤 a
# /\\$/N      當前行以\結尾 -> 讀取下一行追加到模式空間(含換行符)
# s/\\\n//    刪除 \ 和 換行符
# ta          替換成功(即有續行) -> 跳轉標籤 a 繼續檢查
# 結果: line1 line2 line3\nline4

反轉文件行順序

sed '1!G;h;$!d' file
# 1!G  非第一行 -> 追加保持空間到模式空間(換行分隔)
# h    複製模式空間到保持空間(覆蓋)
# $!d  非最後行 -> 刪除模式空間(不輸出), 循環讀取下一行
# 最後行: 模式空間含所有行逆序 -> 自動輸出

實戰範例庫（可直接複製適配）

1. 配置文件參數化修改

# 修改 nginx 埠號
sed -i 's/^\(listen\s\+\)80;/\18080;/' /etc/nginx/nginx.conf

# 批量替換多個配置文件
find /etc/app/conf -name "*.conf" -exec sed -i 's/db_host=localhost/db_host=10.0.1.50/' {} +

2. 日誌清洗與分析

# 提取 ERROR 級別日誌並脫敏 IP
sed -n '/ERROR/p' app.log | sed -E 's/[0-9]{1,3}(\.[0-9]{1,3}){3}/XXX.XXX.XXX.XXX/g'

# 統計各 HTTP 狀態碼出現次數
sed -n 's/.*"HTTP\/1\.[01]" \([0-9]{3}\) .*/\1/p' access.log | sort | uniq -c | sort -rn

3. 文件格式轉換

# DOS/Windows (CRLF) -> Unix (LF)
sed 's/\r$//' dos.txt > unix.txt
# 或
sed -i 's/\r//g' file.txt

# CSV 欄位提取 (第 2, 4 欄)
sed -E 's/^([^,]*),([^,]*),([^,]*),([^,]*).*/\2,\4/' data.csv

4. 在匹配行前後插入多行內容

# 在包含 "server {" 的行後插入多行配置
sed -i '/server {/a\
    listen 8080;\
    server_name example.com;\
    root /var/www/html;\
' nginx.conf

5. 刪除文件首尾指定行數

# 刪除前 5 行 (跳過標題)
sed -i '1,5d' data.csv

# 刪除最後 3 行 (去除尾部統計)
# 需知總行數或用 tac 反轉
tail -n +4 data.csv | head -n -3 > clean.csv  # 更簡潔替代方案

sed vs awk vs grep：選型決策樹

• grep：純查找/過濾行，無需修改 → 最快。
• sed：行級編輯、替換、刪除、插入、簡單列提取、流式處理大文件 → 核心優勢。
• awk：欄位級運算、聚合統計、複雜邏輯判斷、報表生成、多文件關聯 → 編程能力最強。

避坑指南與最佳實踐

1. 原地修改 -i 必備份：sed -i.bak 's/old/new/' file，生產環境零容忍。
2. 正則貪婪匹配陷阱：`s/.*pattern.*/new/` 會匹配全行最長。用非貪婪（`sed` 不直接支援，改用 `[^pattern]*` 或換 `awk`/`perl`）或精確定界。
3. 換行符處理：模式空間預設不含行尾 `\n`（已被分隔），多行操作需用 `N`/`H`/`G` 顯式引入。
4. 大文件效能：`sed` 流式處理，記憶體常數級。避免在腳本中多次管道串聯 `sed`，合併為單次調用或用 `-f` 腳本文件。
5. BRE vs ERE：預設基本正則 (BRE)，`+ ? | () {} ` 需轉義。加 `-r`/`-E` 使用擴展正則 (ERE) 更直觀。

精通 sed，即掌握了 Linux 文本處理的「手術刀」。從日誌清洗到配置自動化，從單行替換到多行重組，sed 以極簡語法承載極強表達力。建議將常用模式封裝為腳本庫（-f 模式），納入版本控制，讓文本處理可複用、可審計、可測試。