sedを使用して複数行の文字列を置き換えるにはどうすればよいですか？

を\n使用して置換するパターンに追加すると、sed一致しないことに気付きました。例：

$ cat > alpha.txt
This is
a test
Please do not
be alarmed

$ sed -i'.original' 's/a test\nPlease do not/not a test\nBe/' alpha.txt

$ diff alpha.txt{,.original}

$ # No differences printed out

これを機能させるにはどうすればよいですか？

最も簡単な呼び出しでのsed、それが持っている1つのすなわちパターン・スペース内のテキストの行を。\n入力からの1行の区切りテキスト。パターン空間の単一行には\n... はありません。そのため、正規表現は何も検出しません。

複数の行をパターンスペースに読み込んで驚くほどうまく操作できますが、通常の努力よりもはるかに優れています。Sedには、このタイプのことを可能にする一連のコマンドがあります...ここに、sedのコマンド概要へのリンクがあります。それは私が見つけた最高のものであり、私に転がり込ませました。

ただし、sedのマイクロコマンドの使用を開始したら、「ワンライナー」のアイデアを忘れてください。構造化されたプログラムのように配置するのは、その感触をつかむまで便利です...驚くほど単純で、同様に珍しいです。テキスト編集の「アセンブラー言語」と考えることができます。

要約：sedを単純なものに使用しますが、一般的には、1行での作業を超えると、ほとんどの人が他の何かを好むようになります...
他の誰かに提案してもらいます。最良の選択が何であるかは本当にわかりません（sedを使用しますが、それはperlを十分に知らないためです）。

sed '/^a test$/{
       $!{ N        # append the next line when not on the last line
         s/^a test\nPlease do not$/not a test\nBe/
                    # now test for a successful substitution, otherwise
                    #+  unpaired "a test" lines would be mis-handled
         t sub-yes  # branch_on_substitute (goto label :sub-yes)
         :sub-not   # a label (not essential; here to self document)
                    # if no substituion, print only the first line
         P          # pattern_first_line_print
         D          # pattern_ltrunc(line+nl)_top/cycle
         :sub-yes   # a label (the goto target of the 't' branch)
                    # fall through to final auto-pattern_print (2 lines)
       }    
     }' alpha.txt  

ここでは同じスクリプトであり、明らかに読みにくく作業しにくいものに凝縮されていますが、一部の人は疑い深くワンライナーと呼んでいます

sed '/^a test$/{$!{N;s/^a test\nPlease do not$/not a test\nBe/;ty;P;D;:y}}' alpha.txt

ここに私のコマンド「チートシート」があります

:  # label
=  # line_number
a  # append_text_to_stdout_after_flush
b  # branch_unconditional             
c  # range_change                     
d  # pattern_delete_top/cycle          
D  # pattern_ltrunc(line+nl)_top/cycle 
g  # pattern=hold                      
G  # pattern+=nl+hold                  
h  # hold=pattern                      
H  # hold+=nl+pattern                  
i  # insert_text_to_stdout_now         
l  # pattern_list                       
n  # pattern_flush=nextline_continue   
N  # pattern+=nl+nextline              
p  # pattern_print                     
P  # pattern_first_line_print          
q  # flush_quit                        
r  # append_file_to_stdout_after_flush 
s  # substitute                                          
t  # branch_on_substitute              
w  # append_pattern_to_file_now         
x  # swap_pattern_and_hold             
y  # transform_chars                   

のperl代わりに使用sed：

$ perl -0777 -i.original -pe 's/a test\nPlease do not/not a test\nBe/igs' alpha.txt
$ diff alpha.txt{,.original}
2,3c2,3
< not a test
< Be
---
> a test
> Please do not

-pi -eは、標準の「インプレース置換」コマンドラインシーケンスであり、-0777を使用すると、perlはファイル全体を丸lurみします。詳細については、perldoc perlrunを参照してください。

私は、\nシンボルを他のシンボルに置き換えてから、通常どおり動作する方が良いと思います：

たとえば、機能していないソースコード：

cat alpha.txt | sed -e 's/a test\nPlease do not/not a test\nBe/'

次のように変更できます。

cat alpha.txt | tr '\n' '\r' | sed -e 's/a test\rPlease do not/not a test\rBe/'  | tr '\r' '\n'

誰もが知っていない場合は、\nUNIXの行末、ある\r\n窓、 - \r-古典的なMac OSが。通常のUNIXテキストは\rシンボルを使用しないため、この場合に使用しても安全です。

エキゾチックな記号を使用して、一時的に\ nを置き換えることもできます。例として-\ f（フォームフィードシンボル）。ここでより多くのシンボルを見つけることができます。

cat alpha.txt | tr '\n' '\f' | sed -e 's/a test\fPlease do not/not a test\fBe/'  | tr '\f' '\n'

すべてを考慮すると、ファイル全体をゴブリングするのが最速の方法かもしれません。

基本的な構文は次のとおりです。

sed -e '1h;2,$H;$!d;g' -e 's/__YOUR_REGEX_GOES_HERE__...'

ファイルが非常に大きい場合、ファイル全体をゴブリングすることは選択肢にならないかもしれません。このような場合、ここで提供される他の回答は、小さなメモリフットプリントで動作することが保証されているカスタマイズされたソリューションを提供します。

他のすべてのハックとスラッシュの状況では、単に先頭に追加し、-e '1h;2,$H;$!d;g'その後に元のsed正規表現の引数が続くだけで、仕事はほぼ完了します。

例えば

$ echo -e "Dog\nFox\nCat\nSnake\n" | sed -e '1h;2,$H;$!d;g' -re 's/([^\n]*)\n([^\n]*)\n/Quick \2\nLazy \1\n/g'
Quick Fox
Lazy Dog
Quick Snake
Lazy Cat

何を-e '1h;2,$H;$!d;g'するの？

1、2,$、$!部品を直接次のコマンドがオン動作するライン限定ライン指定子あります。

• 1：最初の行のみ
• 2,$：2番目以降のすべての行
• $!：最後以外のすべての行

そのため、これがN行入力の各行で発生することです。

  1: h, d
  2: H, d
  3: H, d
  .
  .
N-2: H, d
N-1: H, d
  N: H, g

gコマンドライン指定子を与えられていないが、前述のdコマンドは、特別な条項を持っている「スタート次のサイクルを。」、これは防ぎg最後を除くすべての行で実行されているから。

各コマンドの意味に関して：

• 最初hに続いてH、各ラインのコピーのSは、に入力線前記sed「sは空間を保持します。（任意のテキストバッファを考えてください。）
• その後、d各行を破棄して、これらの行が出力に書き込まれないようにします。ただし、ホールドスペースは保持されます。
• 最後に、最後の行でg、ホールドスペースからすべての行の累積を復元し、sed入力全体に対して正規表現を実行できるようにします（一度に1行ずつではなく）。に一致し\nます。

sed複数行の操作を管理するために3つのコマンドがありますN、DとP（にそれらを比較ノーマル n、dおよびp）。

この場合、パターンの最初の行を照合しN、2番目の行をパターンスペースに追加してsから、置換に使用できます。

何かのようなもの：

/a test$/{
  N
  s/a test\nPlease do not/not a test\nBe/
}

できますが、難しいです。別のツールに切り替えることをお勧めします。置換したいテキストのどの部分にも一致しない正規表現がある場合、GNU awkのawkレコード区切り文字として使用できます。

awk -v RS='a' '{gsub(/hello/, "world"); print}'

検索文字列に連続する改行が2つもない場合は、awkの「段落モード」を使用できます（1つ以上の空白行がレコードを区切ります）。

awk -v RS='' '{gsub(/hello/, "world"); print}'

簡単な解決策は、Perlを使用して、ファイルを完全にメモリにロードすることです。

perl -0777 -pe 's/hello/world/g'

これは2行のマッチングのsedソリューションだと思います。

sed -n '$!N;s@a test\nPlease do not@not a test\nBe@;P;D' alpha.txt

3行の一致が必要な場合は...

sed -n '1{$!N};$!N;s@aaa\nbbb\nccc@xxx\nyyy\nzzz@;P;D'

4行の一致が必要な場合は...

sed -n '1{$!N;$!N};$!N;s@ ... @ ... @;P;D'

「s」コマンドの交換部品が行を縮小する場合、このようにもう少し複雑になります

# aaa\nbbb\nccc shrink to one line "xxx"

sed -n '1{$!N};$!N;/aaa\nbbb\nccc/{s@@xxx@;$!N;$!N};P;D'

ペースメント部分がラインを成長させると、このように少し複雑になります

# aaa\nbbb\nccc grow to five lines vvv\nwww\nxxx\nyyy\nzzz

sed -n '1{$!N};$!N;/aaa\nbbb\nccc/{s@@vvv\nwww\nxxx\nyyy\nzzz@;P;s/.*\n//M;P;s/.*\n//M};P;D'

sed -i'.original' '/a test/,/Please do not/c not a test \nBe' alpha.txt

ここで/a test/,/Please do not/（マルチライン）テキストのブロックと見なされる、cある変更コマンド新しいテキストが続きますnot a test \nBe

置換されるテキストが非常に長い場合は、ex構文をお勧めします。

sed -e'$!N;s/^\(a test\n\)Please do not be$/not \1Be/;P;D' <in >out

入力時にウィンドウを少し広げてください。

とても簡単です。標準の代替に加えて; あなただけの必要$!N、PとDここに。

Perlとは別に、ストリーム（およびファイル）の複数行編集のための一般的で便利なアプローチは次のとおりです。

最初に、たとえば、新しいUNIQUE行区切り文字を必要に応じて作成します。

$ S=__ABC__                     # simple
$ S=__$RANDOM$RANDOM$RANDOM__   # better
$ S=$(openssl rand -hex 16)     # ultimate

次に、sedコマンド（または他のツール）で、\ nを$ {S}に置き換えます。

$ cat file.txt | awk 1 ORS=$S |  sed -e "s/a test${S}Please do not/not a test\nBe/" | awk 1 RS=$S > file_new.txt

（awkはASCII行区切り文字をあなたのものに置き換え、その逆も同様です。）

これは、OS Xで動作するようにxaraの巧妙な答えを少し修正したものです（10.10を使用しています）。

cat alpha.txt | tr '\n' '\r' | sed -e 's/a test$(printf '\r')Please do not/not a test$(printf '\r')Be/'  | tr '\r' '\n'

明示的に使用する代わりに、\rを使用する必要があります$(printf '\r')。

私はsedを使用してファイルに数行のHTMLを追加したかった（そしてここで終わった）。通常、私は単にperlを使用しますが、sed、bash、および他の多くはないボックスにいました。文字列を1行に変更し、bash / sedに\ t \ nを補間させると、すべてがうまくいくことがわかりました。

HTML_FILE='a.html' #contains an anchor in the form <a name="nchor" />
BASH_STRING_A='apples'
BASH_STRING_B='bananas'
INSERT="\t<li>$BASH_STRING_A<\/li>\n\t<li>$BASH_STRING_B<\/li>\n<a name=\"nchor\"\/>"
sed -i "s/<a name=\"nchor"\/>/$INSERT/" $HTML_FILE

二重引用符とスラッシュをエスケープする機能があればよりきれいになりますが、時には抽象化が時間の泥棒であることがあります。

GNUにsedは-z、OPが適用しようとした構文を使用できるオプションがあります。（manページ）

例：

$ cat alpha.txt
This is
a test
Please do not
be alarmed

$ sed -z 's/a test\nPlease do not\nbe/not a test\nBe/' -i alpha.txt

$ cat alpha.txt
This is
not a test
Be alarmed

注意してください：あなたが使用している場合^と$、彼らは今、NUL文字（ないで区切ら行の先頭と末尾に一致します\n）。また、すべての（\n-separated）行の一致を確実に置換するにはg、グローバル置換（たとえばs/.../.../g）にフラグを使用することを忘れないでください。

クレジット： @stéphane-chazelas は、上記のコメントで最初に-zについて言及しました。

Sedは改行で入力を中断します。ループごとに1行のみを保持します。
したがって\n、パターンスペースに含まれていない（改行）に一致する方法はありません。

ただし、ループを使用して、sed がパターン空間に2つの連続した行を保持するようにする方法があります。

sed 'N;l;P;D' alpha.txt

NとPの間に必要な処理を追加します（を置き換えますl）。

この場合（2行）：

$ sed 'N;s/a test\nPlease do not/not a test\nBe/;P;D' alpha.txt
This is
not a test
Be
be alarmed

または、3行の場合：

$ sed -n '1{$!N};$!N;s@a test\nPlease do not\nbe@not a test\nDo\nBe@;P;D' alpha.txt 
This is
not a test
Do
Be alarmed

同じ量の行が置き換えられると仮定しています。