sed置換パターンの文字列をエスケープする

私のbashスクリプトには、外部（ユーザーから受け取った）文字列があり、sedパターンで使用する必要があります。

REPLACE="<funny characters here>"
sed "s/KEYWORD/$REPLACE/g"

$REPLACE文字列をエスケープして、文字列のsed置き換えとして安全に受け入れられるようにするにはどうすればよいですか？

注：KEYWORDこれは、ユーザによって供給されていないいない試合などでダムストリングです。

警告：これは改行を考慮しません。より詳細な回答については、代わりにこのSO質問を参照してください。（ありがとう、エド・モートンとニクラス・ピーター）

すべてをエスケープすることは悪い考えであることに注意してください。Sedは、特別な意味を得るために多くの文字をエスケープする必要があります。たとえば、置換文字列の数字をエスケープすると、後方参照になります。

ベンブランクが言ったように、置換文字列ではエスケープする必要のある文字は3つだけです（エスケープ、エスケープ、ステートメントの終わりにはスラッシュ、すべて置換には＆）：

ESCAPED_REPLACE=$(printf '%s\n' "$REPLACE" | sed -e 's/[\/&]/\\&/g')
# Now you can use ESCAPED_REPLACE in the original sed statement
sed "s/KEYWORD/$ESCAPED_REPLACE/g"

KEYWORD文字列をエスケープする必要がある場合は、次のものが必要です。

sed -e 's/[]\/$*.^[]/\\&/g'

そして、以下によって使用できます。

KEYWORD="The Keyword You Need";
ESCAPED_KEYWORD=$(printf '%s\n' "$KEYWORD" | sed -e 's/[]\/$*.^[]/\\&/g');

# Now you can use it inside the original sed statement to replace text
sed "s/$ESCAPED_KEYWORD/$ESCAPED_REPLACE/g"

/区切り文字として以外の文字を使用する場合は、使用している文字で上記の式のスラッシュを置き換える必要があることに注意してください。説明については、PeterJCLawのコメントを参照してください。

編集済み：以前は考慮されていなかったいくつかのまれなケースのため、上記のコマンドは何度か変更されました。詳細については、編集履歴を確認してください。

sedコマンドを使用すると/、セパレータの代わりに他の文字を使用できます。

sed 's#"http://www\.fubar\.com"#URL_FUBAR#g'

二重引用符は問題ではありません。

replace句で特別に扱われる3つのリテラル文字は/、\（句を閉じるため）、（文字をエスケープするため、後方参照など）、&（一致を置換に含めるため）です。したがって、必要なのはこれらの3つの文字をエスケープすることだけです。

sed "s/KEYWORD/$(echo $REPLACE | sed -e 's/\\/\\\\/g; s/\//\\\//g; s/&/\\\&/g')/g"

例：

$ export REPLACE="'\"|\\/><&!"
$ echo fooKEYWORDbar | sed "s/KEYWORD/$(echo $REPLACE | sed -e 's/\\/\\\\/g; s/\//\\\//g; s/&/\\\&/g')/g"
foo'"|\/><&!bar

ピアノサウルスの正規表現に基づいて、キーワードと置換の両方をエスケープするbash関数を作成しました。

function sedeasy {
  sed -i "s/$(echo $1 | sed -e 's/\([[\/.*]\|\]\)/\\&/g')/$(echo $2 | sed -e 's/[\/&]/\\&/g')/g" $3
}

使い方は次のとおりです。

sedeasy "include /etc/nginx/conf.d/*" "include /apps/*/conf/nginx.conf" /etc/nginx/nginx.conf

応答するのが少し遅れます...しかし、これを行うにはもっと簡単な方法があります。区切り文字（つまり、フィールドを区切る文字）を変更するだけです。だから、s/foo/bar/あなたの代わりに書いてくださいs|bar|foo。

そして、これを行う簡単な方法は次のとおりです。

sed 's|/\*!50017 DEFINER=`snafu`@`localhost`\*/||g'

結果の出力には、厄介なDEFINER句がありません。

間違った質問をしていることがわかりました。私も間違った質問をしました。それが間違っている理由は、最初の文の始まりです：「私のbashスクリプトで...」。

私は同じ質問をし、同じ間違いをしました。もしbashを使用している場合は、文字列置換を行うためにsedを使用する必要はありません（それはだくらい bashに組み込まれている置換機能を使用する方がクリーンです）。

たとえば、次のようなものの代わりに：

function escape-all-funny-characters() { UNKNOWN_CODE_THAT_ANSWERS_THE_QUESTION_YOU_ASKED; }
INPUT='some long string with KEYWORD that need replacing KEYWORD.'
A="$(escape-all-funny-characters 'KEYWORD')"
B="$(escape-all-funny-characters '<funny characters here>')"
OUTPUT="$(sed "s/$A/$B/g" <<<"$INPUT")"

bash機能のみを使用できます。

INPUT='some long string with KEYWORD that need replacing KEYWORD.'
A='KEYWORD'
B='<funny characters here>'
OUTPUT="${INPUT//"$A"/"$B"}"

awkを使用してください-よりクリーンです：

$ awk -v R='//addr:\\file' '{ sub("THIS", R, $0); print $0 }' <<< "http://file:\_THIS_/path/to/a/file\\is\\\a\\ nightmare"
http://file:\_//addr:\file_/path/to/a/file\\is\\\a\\ nightmare

これは、少し前に使用したAWKの例です。新しいAWKSを印刷するAWKです。AWKとSEDは似ているので、良いテンプレートかもしれません。

ls | awk '{ print "awk " "'"'"'"  " {print $1,$2,$3} " "'"'"'"  " " $1 ".old_ext > " $1 ".new_ext"  }' > for_the_birds

それは過度に見えますが、どういうわけか引用符の組み合わせは 'をリテラルとして出力し続けるために機能します。次に、私が正しく覚えている場合、変数は「$ 1」のような引用符で囲まれています。試してみて、SEDでどのように機能するかを教えてください。

タブのような特殊文字で壊れるsedeasy機能を改善しました。

function sedeasy_improved {
    sed -i "s/$(
        echo "$1" | sed -e 's/\([[\/.*]\|\]\)/\\&/g' 
            | sed -e 's:\t:\\t:g'
    )/$(
        echo "$2" | sed -e 's/[\/&]/\\&/g' 
            | sed -e 's:\t:\\t:g'
    )/g" "$3"
}

では、何が違うのですか？$1そして$2シェル拡張を避け、タブまたは二重のスペースを維持するために引用符で包まれました。

のタブを変換する追加のパイプ| sed -e 's:\t:\\t:g'（:トークンとして好き）\t。

これらは私が見つけたエスケープコードです：

* = \x2a
( = \x28
) = \x29

" = \x22
/ = \x2f
\ = \x5c

' = \x27
? = \x3f
% = \x25
^ = \x5e

"と 'に関するシェルの制限によって発生するすべての喜びを忘れないでください

そう（kshで）

Var=">New version of \"content' here <"
printf "%s" "${Var}" | sed "s/[&\/\\\\*\\"']/\\&/g' | read -r EscVar

echo "Here is your \"text\" to change" | sed "s/text/${EscVar}/g"

sedコマンドの変数値を置き換えるだけの場合は、例を削除します。

sed -i 's/dev-/dev-$ENV/g' test to sed -i s/dev-/dev-$ENV/g test

sed置換パターンに渡すランダムパスワードを生成している場合は、ランダム文字列のどの文字セットに注意するかを選択します。値をbase64としてエンコードすることによって作成されたパスワードを選択した場合、base64で可能な文字とsed置換パターンの特殊文字の両方が存在します。その文字は「/」であり、生成するパスワードから簡単に削除できます。

# password 32 characters log, minus any copies of the "/" character.
pass=`openssl rand -base64 32 | sed -e 's/\///g'`;

これを行う簡単な方法は、事前に文字列を作成し、それをパラメータとして使用することです。 sed

rpstring="s/KEYWORD/$REPLACE/g"
sed -i $rpstring  test.txt