sed - потоковый редактор текста

Зачем sed

Когда надо переписать строки в потоке (логе, конфиге, выводе команды), sed - самый быстрый инструмент: одна команда, без временных файлов, без Python'а. Работает построчно (line-oriented), без буферизации всего входа в память. Идеально для пайпов и find -exec.

Если задача шире построчной замены - бери [[cmd-awk|awk]] или Python.

Базовый синтаксис

sed [OPTIONS] 'SCRIPT' [FILE...]

sed [OPTIONS] -f script.sed [FILE...]

Без файла читает stdin. Скрипт - набор команд через ; или -e. По дефолту печатает каждую обработанную строку (если не отключить -n).

Команда s - замена

Самая частая команда:

sed 's/old/new/' file.txt        # первое совпадение в строке

sed 's/old/new/g' file.txt       # все совпадения (global)

sed 's/old/new/2' file.txt       # только 2-е совпадение

sed 's/old/new/gi' file.txt      # global + case-insensitive

Разделитель не обязан быть / - удобно для путей:

sed 's|/old/path|/new/path|g' file

sed 's#http://#https://#g' urls.txt

-E для ERE

По дефолту sed использует BRE, как у grep без -E. То есть +, ?, (, ), {, } нужно экранировать. Включи -E (или -r в GNU):

sed -E 's/(error|warn): (.*)/[\1] \2/' app.log

Группы \1, \2 доступны и в BRE, но скобки в BRE надо \(\).

In-place редактирование -i

sed -i 's/foo/bar/g' file.txt           # GNU sed

sed -i.bak 's/foo/bar/g' file.txt       # с backup file.txt.bak

sed -i '' 's/foo/bar/g' file.txt        # macOS BSD sed - пустое расширение обязательно

Кроссплатформенный кошмар: GNU sed -i принимает опциональный аргумент слитно (sed -i.bak), BSD - требует пробел и обязательное расширение (sed -i '' ...). На macOS чаще ставят gsed через brew.

Адресация - где применять команду

sed '5d' file.txt                # удалить 5-ю строку

sed '5,10d' file                 # удалить строки 5-10

sed '/^#/d' file                 # удалить комментарии

sed '/start/,/end/d' file        # удалить блок от start до end включительно

sed '$d' file                    # удалить последнюю

sed '1,/^$/d' file               # удалить с начала до первой пустой

sed -n '/ERROR/p' file           # напечатать только ERROR-строки (как grep)

Адресные диапазоны - убийственно полезная фича: вырезаешь куски конфигов, фильтруешь блоки логов между маркерами.

Команды кроме s

sed '/^server {/i\# auto-managed' nginx.conf  # коммент перед каждым server-блоком

sed -n '5,10p' file                            # быстрее `head -10 | tail -6`

sed '0,/foo/{s/foo/bar/}' file                 # заменить ТОЛЬКО первое foo во всём файле

Multi-line: pattern space + hold space

sed работает с двумя буферами:

• pattern space - текущая строка (по умолчанию)
• hold space - вторичная память, между обработкой строк

Команды между ними:

• h - скопировать pattern → hold (затирает)
• H - добавить pattern в hold (через \n)
• g - скопировать hold → pattern (затирает)
• G - добавить hold в pattern
• x - swap

Классический трюк - реверс строк (tac):

sed '1!G;h;$!d' file

Это уже территория где [[cmd-awk|awk]] или Python читаются легче.

Когда что-то пошло не так

• sed: -i may not be used with stdin - после -i нужен файл, не пайп
• sed: 1: "...": invalid command code на macOS - BSD-sed; ставь brew install gnu-sed и зови gsed
• unterminated 's' command - забыл закрывающий / или экранирование спецсимвола в шаблоне
• Замена не сработала, хотя grep находит - sed без -E ждёт BRE; группа (foo|bar) без -E - литерал
• In-place портит symlink - GNU sed по дефолту переименовывает, разрывая ссылку. Используй --follow-symlinks
• Кодировка полетела - sed работает побайтово; для UTF-8 с мульти-байтными классами [[:alpha:]] нужен правильный locale (LC_ALL=ru_RU.UTF-8)

Альтернативы

• awk - когда работаешь с полями, нужен счётчик, агрегация
• perl -pe/perl -i - PCRE, lookahead, более вменяемая кросс-платформенность
• sd (Rust) - современный CLI с PCRE-дефолтом и понятным синтаксисом