看圖猜詩，你有任何想法都可以在評論區留言哦~

摘要：Sed（Stream Editor）作為 Linux 三劍客之一，憑借其流式處理與正則表達式能力，成為運維場景中文本批處理的核心工具。本文聚焦生產環境高頻需求，涵蓋日志清洗、K8s 配置管理、數據格式化等 12 大核心場景，通過代碼演示與原理剖析，提供可直接復用的 Sed 實戰模板。

---

---

一、Sed 的優勢

1.1 Sed的核心特性

• 非交互式操作：通過命令行或腳本批量處理文本，無需人工干預。
• 行尋址能力：支持按行號、正則表達式匹配定位操作范圍。
• 原地編輯：通過-i參數直接修改源文件（需謹慎使用）。
• 跨平臺兼容：適用于所有Unix/Linux系統及Windows（借助Cygwin/WSL）。

1.2 Sed與同類工具對比

工具	Sed	Awk	Perl
定位	行級處理	列/字段級處理	復雜文本與邏輯處理
語法	簡潔，專注文本流轉換	支持變量、數組、條件判斷	完整的腳本語言
性能	極高（純流處理）	較高	中等（功能越復雜越慢）
適用場景	簡單替換、刪除、插入	結構化數據提取與報表生成	復雜文本解析與正則操作

總結：Sed在簡單文本流處理場景中性能與簡潔性優勢突出，適合日志清洗、配置批量修改等任務。

---

二、安裝配置

2.1 安裝方法

• Linux/Unix：默認預裝，無需額外安裝。
• macOS：系統自帶BSD版本Sed，若需GNU版本：

  brew install gnu-sed
  # 使用gsed調用
  

• Windows：
  • 通過WSL使用Linux環境。
  • 安裝Cygwin或Git Bash集成環境。

2.2 版本驗證

# GNU版本顯示"GNU sed"
linux01@linux01:~/data/sed$ sed --version
sed (GNU sed) 4.9
Packaged by Debian
Copyright (C) 2022 Free Software Foundation, Inc.
License GPLv3+: GNU GPL version 3 or later <https://gnu.org/licenses/gpl.html>.
This is free software: you are free to change and redistribute it.
There is NO WARRANTY, to the extent permitted by law.

---

三、使用技巧

3.1 基礎語法結構

sed [選項] '地址范圍/模式 命令' 文件

• 常用選項：

  • -n：抑制默認輸出，僅顯示處理后的行。
  • -i[后綴]：原地編輯文件（建議備份，如-i.bak），重點：如需修改立即生效則設置該選項。
  • -e：連接多個命令（如sed -e 'cmd1' -e 'cmd2'）。

• 常用正則：

  • ^：匹配行首。
  • $：匹配行尾。
  • .*：匹配任意字符（通配符）。

3.2 核心命令與應用

替換操作（s命令）：
語法：s/模式/替換內容/修飾符

• 基礎替換：

  # 替換每行首個"apple"為"orange"
  sed 's/apple/orange/' file.txt
  

• 全局替換（g修飾符）：

  # 替換所有"apple"為"orange"
  sed 's/apple/orange/g' file.txt
  

• 指定分隔符：支持任意分隔符（如#、|），處理含斜杠內容：

  # 替換所有"apple"為"orange"
  sed 's#/path/to/old#/new/path#g' config.conf
  

刪除操作（d命令）：

• 刪除空行：

  # 以空開頭，以空結尾，表示為空行
  sed '/^$/d' file.txt
  

• 刪除特定范圍行：

  # 刪除第5行
  sed '5d' file.txt
  # 刪除10到20行
  sed '10,20d' file.txt
  

插入與追加（i/a命令）：

• 行前插入（i）：

  # 在第3行前插入"Hello World"
  sed '3i Hello World' file.txt
  

• 行后追加（a）：

  # 在匹配"error"的行后追加"Check log"
  sed '/error/a Check log' file.txt
  

多命令組合：

# 刪除空行并替換"test"為"prod"
sed -e '/^$/d' -e 's/test/prod/g' file.txt

---

四、生產高頻場景

4.1 日志文件清洗

需求：清理Nginx日志中的調試信息（含DEBUG的行）并替換時間格式。
原始日志片段：

2023-10-01 12:00:00 [DEBUG] Client 192.168.1.1 connected
2023-10-01 12:00:01 [INFO] Request /api/users handled

處理腳本：

sed -e '/\[DEBUG\]/d' \     # 刪除DEBUG行-e 's/\([0-9]\{4\}-[0-9]\{2\}-[0-9]\{2\}\) \([0-9:\{8\}\]\)/\1T\2Z/' \  # 時間格式標準化access.log > cleaned.log

輸出結果：

2023-10-01T12:00:01Z [INFO] Request /api/users handled

---

4.2 批量修改配置文件

需求：將多臺服務器的/etc/ssh/sshd_config中Port 22改為Port 2222，并備份原文件。
操作命令：

# 精準定位
sed -i.bak 's/^Port 22$/Port 2222/' /etc/ssh/sshd_config# 驗證修改
grep '^Port 2222$' /etc/ssh/sshd_config

關鍵點：

• ^ 匹配以 Port 開頭，如未打開注釋的 # Port 則不匹配。
• $ 匹配 22 結尾的行，如 Port 2211 則不匹配。

---

4.3 日志時間戳格式標準化

需求：將日志中的時間戳從 Oct 1 12:00:00 轉換為 ISO 8601 格式 2023-10-01T12:00:00Z。
日志片段：

Oct 1 12:00:00 server1 nginx: Started  
Oct 1 12:00:01 server2 app: Connected to DB  

Sed 命令：

sed -E 's/([A-Za-z]{3}) ([0-9]{1,2}) ([0-9]{2}:){2}[0-9]{2}/2023-\1-\2T\3Z/' \  -e 's/\bOct\b/10/g' access.log  

關鍵點：

• -E 啟用擴展正則表達式，簡化分組捕獲。
• 月份縮寫（如 Oct）需二次替換為數字。

---

4.4 刪除敏感信息（如密碼、Token）

需求：清理日志中的 password=*** 字段。
日志片段：

user=admin password=123456 action=login  

Sed 命令：

sed 's/password=[^ ]*//g' secure.log  

輸出：

user=admin action=login  

說明：[^ ]* 匹配非空格字符，直到下一個空格或行尾。

---

4.5 動態修改 K8s Deployment 鏡像版本

需求：將 Deployment YAML 中的鏡像 nginx:1.18 升級至 nginx:1.25。
YAML 片段：

containers:  
- name: nginx  image: nginx:1.18  

Sed 命令：

sed -i.bak '/image: nginx/s/:1.18/:1.25/' deployment.yaml  

安全建議：

• -i.bak 生成備份文件，防止誤操作。

---

4.6 提取錯誤日志的上下文（多行處理）

需求：提取 Java 異常日志的完整堆棧跟蹤（含匹配行及其后 5 行）。
Sed 命令：

sed -n '/Caused by:/{p; :loop n; p; /^$/q; b loop}' app.log  

解析：

• :loop 定義標簽，n 讀取下一行，/^$/q 遇到空行退出。

---

4.7 批量轉換 CSV 文件為 TSV 格式

需求：將逗號分隔的 CSV 轉換為制表符分隔的 TSV。
Sed 命令：

sed 's/,/\t/g' data.csv > data.tsv  

注意：需確保字段內不含逗號（否則需更復雜的 CSV 解析器）。

---

4.8 K8s ConfigMap 內容批量更新

需求：替換 ConfigMap 中 debug: "true" 為 debug: "false"。
YAML 片段：

data:  config.ini: |  [runtime]  debug=true  

Sed 命令：

sed -i '/debug=/s/true/false/' configmap.yaml  

說明：限定在含 debug= 的行內替換，避免誤改其他字段。

---

4.9 日志按時間窗口切割（跨行處理）

需求：提取時間范圍 12:00:00 至 12:05:00 的日志。
Sed 命令：

sed -n '/12:00:00/,/12:05:00/p' syslog  

擴展：結合 awk 處理更復雜的時間范圍。

---

4.10 刪除 JSON 日志中的冗余字段

需求：移除 JSON 中的 internal_debug 字段。
日志片段：

{"timestamp": "2023-10-01", "level": "error", "internal_debug": "x123", "msg": "failed"}  

Sed 命令：

sed 's/"internal_debug":[^,]*,//' app.json  

輸出：

{"timestamp": "2023-10-01", "level": "error", "msg": "failed"}  

---

4.11 K8s Pod 日志的實時過濾

需求：實時監控 Pod 日志中的 OOMKilled 事件。
命令組合：

kubectl logs -f pod/app | sed -n '/OOMKilled/{s/^/[OOM] /; p;}'  

作用：在匹配行前添加 [OOM] 標記并輸出。

---

4.12 多文件批量注釋/取消注釋配置

需求：在 Nginx 配置目錄中注釋所有 listen 80 行。
Sed 命令：

find /etc/nginx/ -type f -name "*.conf" -exec sed -i.bak '/listen 80/s/^/#/' {} +  

解析：

• find 定位所有 .conf 文件，-exec 批量執行 Sed。

---

五、常見問題處理

5.1 特殊字符轉義問題

問題：替換含斜杠/或&的內容時格式錯誤。
解決：

• 更換分隔符：

  sed 's#/old/path#/new/path#g' file.txt
  

• 轉義特殊字符：

  sed 's/&/\&/g' file.txt  # 轉義XML中的&符號
  

5.2 原地修改導致文件丟失

問題：誤用-i未備份導致數據無法恢復。
預防：

• 始終使用-i.bak生成備份文件。
• 測試命令時先省略-i，確認無誤后再執行修改。

5.3 正則表達式匹配失敗

問題：預期匹配的行未被處理。
調試方法：

• 使用p命令打印匹配行：

  sed -n '/pattern/p' file.txt
  

• 啟用正則表達式調試工具（如regex101.com）驗證模式。

---

六、結語

Sed憑借其極簡語法與高效流處理能力，成為Unix哲學中“小而美”工具的典范。掌握其核心命令與正則表達式技巧，可大幅提升文本處理效率，尤其在日志清洗、配置管理等場景中表現卓越。對于更復雜的文本操作，可結合Awk或Perl實現，但Sed始終是快速解決問題的首選利器。

如果你覺得這篇文章對你有幫助，不妨點個贊👍，或者分享給你的朋友們吧！你的支持是我持續創作的最大動力！