sedコマンドは、主にテキストにある文字列を別の文字列に置換することによく使われます。
テキスト編集などにとても便利なコマンドでぜひ覚えておきたいコマンドのひとつです。
目次
- 1 sedとは
- 2 sedコマンドの構文
- 3 sedコマンドのファイルの保存方法について
- 4 パターンマッチした文字列を別の文字列に変換 (s/regexp/replacement/flags)
- 5 パターンスペースとホールドスペース
- 6 -nオプションについて
- 7 スクリプトをファイルから読み込む (-fオプション)
- 8 行の後の行にテキストを追記 (aコマンド)
- 9 行の前の行にテキストを追記 (iコマンド)
- 10 アドレスについて
- 11 アドレスで指定された行を別の文字列に置換 (cコマンド)
- 12 現在の入力行の行番号を表示 (=コマンド)
- 13 パターンスペースを明確な形式で表示 (lコマンド)
- 14 パターンスペースの内容をファイルに出力 (wコマンド)
- 15 ファイルから読み込んで内容を挿入 (rコマンド)
- 16 スクリプトの複数コマンドを実行(-eオプション等)
- 17 文字の置換(yコマンド)
- 18 パターンスペースを表示(pコマンド)
- 19 パターンスペースを削除(dコマンド)
- 20 スクリプトを終了(qコマンド)
- 21 パターンスペースを次の行に飛ばす(nコマンド)
- 22 コマンドをグループ化する
- 23 ホールドスペースの利用
- 24 条件分岐処理
- 25 マルチライン処理
- 26 参考
sedとは
sedとはストリームエディタ(stream editor)の略で、入力ファイルやパイプラインで渡されたテキストを編集することができます。
普通のエディタと違い、パイプライン渡されたテキストを編集できることが特徴です。
また、ファイルにある特定の文字列を一括に編集できるのも利点といえるでしょう。
sedコマンドの特徴としては、テキストの置換がありますが、そのほかにも文字列の挿入や削除なども行うことができます。その際に正規表現のグループ化やアドレスについて知っていると複雑なテキスト編集を行うことができます。
また、パターンスペースやホールドスペースというsedコマンドの2つのバッファについて知っているとsedコマンドの処理についてより詳しくなり、さらに複雑なテキスト編集を行うことができます。
他にもsedコマンドには条件分岐の処理や複数行の処理も行うことができます。
条件分岐の処理を使いこなすことができれば、sedコマンドの置換コマンドであるsコマンドをよりうまく使うことができます。
複数行の処理を行うことができれば、連続している複数行を一つの行にまとめる事等の処理を行うことができます。
sedコマンドの構文
sedコマンドの構文
|
1 |
sed オプション スクリプト 入力ファイル |
オプション：
sedコマンドに対するオプションです。
スクリプト：
|
1 |
[addr]X[options] |
で表現されます。また、スクリプトは以下のように記述することができます。
addr：行の位置や範囲を示すもので、行番号や正規表現を用いて指定できます。
X：sedコマンドの機能を決定する、一文字のことです。
options：Xで指定したものによって必要なオプションのことです。
入力ファイル：
１個以上の入力ファイルを指定できます。
sedコマンドに入力ファイルがないもしくは-(ハイフン)の場合は、標準出力に対して、sedコマンドのスクリプトを実行します。
|
1 |
<command> | sed スクリプト |
|
1 |
<command> | sed スクリプト - |
|
1 |
sed スクリプト < ファイル |
上から順に
１つ目は入力がファイルがない場合です。
２つ目は-(ハイフン)を用いた場合です。
３つ目はリダイレクトによって、ファイルを標準入力としてsedコマンドに渡した場合です。
それぞれsedコマンドで、標準出力に対して処理を行うという意味で同じになります。
sedコマンドのファイルの保存方法について
sedコマンドの出力は、オプションがない場合、標準出力に現れます。
また、sedコマンドの-iオプションをつけた場合、対象のファイルに対して出力を行います。
ファイルに保存する方法として、一つは、リダイレクトを利用して別のファイルを作成し、その後にmvコマンドなどでtmp.txtをitemtext.txtに置き換える方法があります。
|
1 2 |
sed 's/apple/melon/' itemtext.txt > tmp.txt mv tmp.txt itemtext.txt |
また、-iオプションを用いて、直接ファイルを置き換えてしまう方法があります。
|
1 |
sed -i 's/apple/melon/' itemtext.txt |
-iオプションは、GNU sedで利用できます。
-iオプションは、実際には一時ファイルが作られ、その一時ファイルに対してsedコマンドの出力が行われ、その一時ファイルの名前を対象のファイルとして置き換えます。
-iオプションで置き換える前のバックアップファイルが欲しい場合は、
|
1 |
sed -i.bak 's/apple/melon/' itemtext.txt |
のように-iオプションの後に接尾辞を指定することでバックアップファイルを作成することができます。
この例ではitemtext.txt.bakのような置き換える前のバックアップファイルを作成することができます。
パターンマッチした文字列を別の文字列に変換
(s/regexp/replacement/flags)
s/regexp/replacement/flagsは、sedコマンドの主要な機能といえるものです。
正規表現(Regular Expression)regexpにマッチしたものを別の文字列replacementに置き換えます。
また、flagsは0個以上を指定することでき、flagsによって文字列の置き換え方などを変更することができます。
最初にパターンマッチした文字列を置換
(flags:なし)
s/regexp/replacement/は、それぞれの行で最初に登場した文字列を別の文字列に置き換えます。
コマンド例では、最初に登場したappleという文字列をmelonという文字列に置き換えます。
コマンド例
|
1 |
sed 's/apple/melon/' itemtext.txt |
itemtext.txt
apple apple apple apple apple onion apple apple yuzu apple onion apple apple onion onion apple onion yuzu apple yuzu apple apple yuzu onion apple yuzu yuzu onion apple apple onion apple onion onion apple yuzu onion onion apple onion onion onion onion onion yuzu onion yuzu apple onion yuzu onion onion yuzu yuzu yuzu apple apple yuzu apple onion yuzu apple yuzu yuzu onion apple yuzu onion onion yuzu onion yuzu yuzu yuzu apple yuzu yuzu onion yuzu yuzu yuzu
実行結果
melon apple apple melon apple onion melon apple yuzu melon onion apple melon onion onion melon onion yuzu melon yuzu apple melon yuzu onion melon yuzu yuzu onion melon apple onion melon onion onion melon yuzu onion onion melon onion onion onion onion onion yuzu onion yuzu melon onion yuzu onion onion yuzu yuzu yuzu melon apple yuzu melon onion yuzu melon yuzu yuzu onion melon yuzu onion onion yuzu onion yuzu yuzu yuzu melon yuzu yuzu onion yuzu yuzu yuzu
すべてのパターンマッチした文字列を置換
(flags:g)
s/regexp/replacement/gはそれぞれの行に登場するすべての正規表現にマッチした文字列を別の文字列に置き換えることができます。
コマンド例では、行に登場したすべてのappleをmelonに置き換えます。
コマンド例
|
1 |
sed 's/apple/melon/g' itemtext.txt |
itemtext.txt ▼表示
実行結果
melon melon melon melon melon onion melon melon yuzu melon onion melon melon onion onion melon onion yuzu melon yuzu melon melon yuzu onion melon yuzu yuzu onion melon melon onion melon onion onion melon yuzu onion onion melon onion onion onion onion onion yuzu onion yuzu melon onion yuzu onion onion yuzu yuzu yuzu melon melon yuzu melon onion yuzu melon yuzu yuzu onion melon yuzu onion onion yuzu onion yuzu yuzu yuzu melon yuzu yuzu onion yuzu yuzu yuzu
n番目のパターンマッチした文字列を置換
(flags:数字)
s/regexp/replacement/1等のflagsに数字を入れたものは、n番目に登場したものだけを別の文字列に変更することができます。
コマンド例では、2番目に登場したスペースを:に変更しています。
コマンド例
|
1 |
sed 's/ /:/2' itemtext.txt |
itemtext.txt ▼表示
実行結果
apple apple:apple apple apple:onion apple apple:yuzu apple onion:apple apple onion:onion apple onion:yuzu apple yuzu:apple apple yuzu:onion apple yuzu:yuzu onion apple:apple onion apple:onion onion apple:yuzu onion onion:apple onion onion:onion onion onion:yuzu onion yuzu:apple onion yuzu:onion onion yuzu:yuzu yuzu apple:apple yuzu apple:onion yuzu apple:yuzu yuzu onion:apple yuzu onion:onion yuzu onion:yuzu yuzu yuzu:apple yuzu yuzu:onion yuzu yuzu:yuzu
１番目のスペースを,に2番目に登場したスペースを:に変更する場合は以下のようにします。
コマンド例
|
1 |
sed -e's/ /,/1' -e's/ /:/1' itemtext.txt |
実行結果
apple,apple:apple apple,apple:onion apple,apple:yuzu apple,onion:apple apple,onion:onion apple,onion:yuzu apple,yuzu:apple apple,yuzu:onion apple,yuzu:yuzu onion,apple:apple onion,apple:onion onion,apple:yuzu onion,onion:apple onion,onion:onion onion,onion:yuzu onion,yuzu:apple onion,yuzu:onion onion,yuzu:yuzu yuzu,apple:apple yuzu,apple:onion yuzu,apple:yuzu yuzu,onion:apple yuzu,onion:onion yuzu,onion:yuzu yuzu,yuzu:apple yuzu,yuzu:onion yuzu,yuzu:yuzu
-eオプションは、追加のスクリプトを記述することで変更することができます。
-eオプションは記述された順番に処理されます。
この例では、最初の-eオプションのスクリプトで１番目のスペースが,に変更されます。
その次に変更された状態のテキストで、次の-eオプションのスクリプトで１番目のスペース(元ファイルの2番目のスペース)を:に変更しています。
また、追加のスクリプトを記述する方法として;を用いて記述する方法もあります。以下のコマンド例でも上と同様の実行結果を得ることができます。
コマンド例
|
1 |
sed 's/ /,/1;s/ /:/1' itemtext.txt |
別の文字列に置換された行を表示
(オプション:-n, flags:p)
pフラグは変更があった行のみを表示します。
-nオプションは、スクリプトで明示的に表示する行を除き、sedコマンドで出力する行を表示しないようにします。
コマンド例
|
1 |
sed -n 's/apple/melon/p' itemtext.txt |
itemtext.txt ▼表示
実行結果
melon apple apple melon apple onion melon apple yuzu melon onion apple melon onion onion melon onion yuzu melon yuzu apple melon yuzu onion melon yuzu yuzu onion melon apple onion melon onion onion melon yuzu onion onion melon onion yuzu melon yuzu melon apple yuzu melon onion yuzu melon yuzu yuzu onion melon yuzu yuzu melon
ここで、-nオプションをつけない場合は、変更があった個所だけが重複して表示されてしまうことに注意が必要です。
コマンド例
|
1 |
sed 's/apple/melon/p' itemtext.txt |
実行結果
melon apple apple melon apple apple melon apple onion melon apple onion melon apple yuzu melon apple yuzu melon onion apple melon onion apple melon onion onion melon onion onion melon onion yuzu melon onion yuzu melon yuzu apple melon yuzu apple melon yuzu onion melon yuzu onion melon yuzu yuzu melon yuzu yuzu onion melon apple onion melon apple onion melon onion onion melon onion onion melon yuzu onion melon yuzu onion onion melon onion onion melon onion onion onion onion onion yuzu onion yuzu melon onion yuzu melon onion yuzu onion onion yuzu yuzu yuzu melon apple yuzu melon apple yuzu melon onion yuzu melon onion yuzu melon yuzu yuzu melon yuzu yuzu onion melon yuzu onion melon yuzu onion onion yuzu onion yuzu yuzu yuzu melon yuzu yuzu melon yuzu yuzu onion yuzu yuzu yuzu
別の文字列に置換された行をファイルに出力
(flags:w filename)
wフラグはファイル名を指定することでそのファイルに変更があった行を書き込みます。
また、ファイルがない場合は作成され、ある場合は上書きされます。
変更があった行を別のファイルに保存したい場合に用いることができます。
コマンド例
|
1 |
sed 's/apple/melon/w change.txt' itemtext.txt |
itemtext.txt ▼表示
実行結果(標準出力)
melon apple apple melon apple onion melon apple yuzu melon onion apple melon onion onion melon onion yuzu melon yuzu apple melon yuzu onion melon yuzu yuzu onion melon apple onion melon onion onion melon yuzu onion onion melon onion onion onion onion onion yuzu onion yuzu melon onion yuzu onion onion yuzu yuzu yuzu melon apple yuzu melon onion yuzu melon yuzu yuzu onion melon yuzu onion onion yuzu onion yuzu yuzu yuzu melon yuzu yuzu onion yuzu yuzu yuzu
実行結果(change.txt)
melon apple apple melon apple onion melon apple yuzu melon onion apple melon onion onion melon onion yuzu melon yuzu apple melon yuzu onion melon yuzu yuzu onion melon apple onion melon onion onion melon yuzu onion onion melon onion yuzu melon yuzu melon apple yuzu melon onion yuzu melon yuzu yuzu onion melon yuzu yuzu melon
グループ化を用いて置換文字列にパターンマッチした文字列を使用
グループ化とは、正規表現の特徴の一つでグループ化したパターンをキャプチャして、置換文字列で使うことができます。
コマンド例では、それぞれの行に対して、最初の単語を最後の単語として追記します。
例えば、「apple onion yuzu」なら、最初の単語の「apple」をその行の最後に追記して「apple onion yuzu apple」にします。
コマンド例
|
1 |
sed 's/\(\([^ ]*\).*\)/\1 \2/' itemtext.txt |
itemtext.txt ▼表示
実行結果
apple apple apple apple apple apple onion apple apple apple yuzu apple apple onion apple apple apple onion onion apple apple onion yuzu apple apple yuzu apple apple apple yuzu onion apple apple yuzu yuzu apple onion apple apple onion onion apple onion onion onion apple yuzu onion onion onion apple onion onion onion onion onion onion onion yuzu onion onion yuzu apple onion onion yuzu onion onion onion yuzu yuzu onion yuzu apple apple yuzu yuzu apple onion yuzu yuzu apple yuzu yuzu yuzu onion apple yuzu yuzu onion onion yuzu yuzu onion yuzu yuzu yuzu yuzu apple yuzu yuzu yuzu onion yuzu yuzu yuzu yuzu yuzu
呼び出す数字に関して、「\(」が現れる順番で１から保存されます。
次の内側にある「\(」と「\)」は最初の単語を表し「\2」で呼び出すことができます。
つまり、この例のパターンは行全体を表して、行全体が置き換える対象になっています。
そして、sedコマンドで行全体を書き換えるようなイメージになっています。
パターンスペースとホールドスペース
sedコマンドは、基本的に入力行をバッファに入れます。
このバッファのことをパターンスペース(pattern space)といいます。
また、sedコマンドは、パターンスペースとは別に補助的なバッファを持ちます。
これをホールドスペース(hold space)といいます。
sedコマンドの基本動作は行ごとに、
１．入力の行をパターンスペースに入れる。
２．sedコマンドのスクリプトを実行する。(パターンスペースの変更や表示等)
３．パターンスペースを表示する。(-nオプションがある場合は行わない)
を繰り返します。
つまり、アドレスを用いることでパターンスペースとホールドスペースをうまく使うことができます。
-nオプションについて
sedコマンドは、デフォルトではスクリプトの最後にパターンスペースを自動的に表示します。
-nオプションは、この自動表示をオフにします。
パターンスペースは、スクリプトでpコマンド等を明示的に記述しない限り、表示されなくなります。
目的によっては、デフォルトの自動表示が不必要になる場合があります。
そんな時に、sedコマンドの-nオプションを覚えておくと便利です。
スクリプトをファイルから読み込む
(-fオプション)
-fオプションは、sedコマンドのスクリプトが書かれたファイルを読み込むことができます。
この例では、script.sedがsedコマンドのスクリプトが書かれたファイルになります。
script.sedでは、sコマンドを用いてそれぞれの行で初めに現れた「apple」を「melon」に変えるスクリプトが書かれています。
コマンド例
|
1 |
sed -fscript.sed itemtext.txt |
script.sed
|
1 |
s/apple/melon/ |
itemtext.txt ▼表示
実行結果
melon apple apple melon apple onion melon apple yuzu melon onion apple melon onion onion melon onion yuzu melon yuzu apple melon yuzu onion melon yuzu yuzu onion melon apple onion melon onion onion melon yuzu onion onion melon onion onion onion onion onion yuzu onion yuzu melon onion yuzu onion onion yuzu yuzu yuzu melon apple yuzu melon onion yuzu melon yuzu yuzu onion melon yuzu onion onion yuzu onion yuzu yuzu yuzu melon yuzu yuzu onion yuzu yuzu yuzu
sedコマンドのスクリプトのコメントについて、#の記号が利用できます。
script.sed
|
1 2 |
#コメントです s/apple/melon/ #置換します |
行の後の行にテキストを追記
(aコマンド)
aコマンドは行の後の行にテキストを追記することができます。
コマンド例
|
1 |
sed -fscript.sed itemtext.txt |
script.sed
|
1 |
a text |
itemtext.txt ▼表示
実行結果
apple apple apple text apple apple onion text apple apple yuzu text apple onion apple text apple onion onion text apple onion yuzu text apple yuzu apple text apple yuzu onion text apple yuzu yuzu text onion apple apple text onion apple onion text onion apple yuzu text onion onion apple text onion onion onion text onion onion yuzu text onion yuzu apple text onion yuzu onion text onion yuzu yuzu text yuzu apple apple text yuzu apple onion text yuzu apple yuzu text yuzu onion apple text yuzu onion onion text yuzu onion yuzu text yuzu yuzu apple text yuzu yuzu onion text yuzu yuzu yuzu text
複数行のテキストを追記する場合は以下のようにします。
コマンド例
|
1 |
sed -fscript.sed itemtext.txt |
script.sed
|
1 2 3 4 |
a\ text1\ text2\ text3 |
実行結果(一部省略)
apple apple apple text1 text2 text3 apple apple onion text1 text2 text3 apple apple yuzu text1 text2 text3 (以下省略します)
行の前の行にテキストを追記
(iコマンド)
iコマンドは行の前の行にテキストを追記することができます。
コマンド例
|
1 |
sed -fscript.sed itemtext.txt |
script.sed
|
1 |
i text |
itemtext.txt ▼表示
実行結果
text apple apple apple text apple apple onion text apple apple yuzu text apple onion apple text apple onion onion text apple onion yuzu text apple yuzu apple text apple yuzu onion text apple yuzu yuzu text onion apple apple text onion apple onion text onion apple yuzu text onion onion apple text onion onion onion text onion onion yuzu text onion yuzu apple text onion yuzu onion text onion yuzu yuzu text yuzu apple apple text yuzu apple onion text yuzu apple yuzu text yuzu onion apple text yuzu onion onion text yuzu onion yuzu text yuzu yuzu apple text yuzu yuzu onion text yuzu yuzu yuzu
また、複数行のテキストを追記する場合は以下のようにします。
コマンド例
|
1 |
sed -fscript.sed itemtext.txt |
script.sed
|
1 2 3 4 |
i\ text1\ text2\ text3 |
実行結果(一部省略)
text1 text2 text3 apple apple apple text1 text2 text3 apple apple onion text1 text2 text3 apple apple yuzu (以下省略します)
アドレスについて
スクリプトは
|
1 |
[addr]X[options] |
で表現されます。
addr：行の位置や範囲を示すもので、行番号や正規表現を用いて指定できます。
X：sedコマンドの機能を決定する、一文字のことです。
options：Xで指定したものによって必要なオプションのことです。
ここでは、addr、つまりアドレスの指定方法についていくつか紹介します。
アドレスを指定しない
アドレスを指定しない場合、すべての行に対してコマンドを実行します。
コマンド例
|
1 |
sed -fscript.sed itemtext.txt |
script.sed
|
1 |
a text |
itemtext.txt ▼表示
実行結果
apple apple apple text apple apple onion text apple apple yuzu text apple onion apple text apple onion onion text apple onion yuzu text apple yuzu apple text apple yuzu onion text apple yuzu yuzu text onion apple apple text onion apple onion text onion apple yuzu text onion onion apple text onion onion onion text onion onion yuzu text onion yuzu apple text onion yuzu onion text onion yuzu yuzu text yuzu apple apple text yuzu apple onion text yuzu apple yuzu text yuzu onion apple text yuzu onion onion text yuzu onion yuzu text yuzu yuzu apple text yuzu yuzu onion text yuzu yuzu yuzu text
数字で指定
(num)
コマンドの前に数字を記述するとその行番号の行に対して、コマンドを実行します。
コマンド例
|
1 |
sed -fscript.sed itemtext.txt |
script.sed
|
1 |
1a text |
itemtext.txt ▼表示
実行結果
apple apple apple text apple apple onion apple apple yuzu apple onion apple apple onion onion apple onion yuzu apple yuzu apple apple yuzu onion apple yuzu yuzu onion apple apple onion apple onion onion apple yuzu onion onion apple onion onion onion onion onion yuzu onion yuzu apple onion yuzu onion onion yuzu yuzu yuzu apple apple yuzu apple onion yuzu apple yuzu yuzu onion apple yuzu onion onion yuzu onion yuzu yuzu yuzu apple yuzu yuzu onion yuzu yuzu yuzu
範囲で指定
(num,num)
アドレスを範囲で指定する場合は2つの数字をカンマで区切ります。
コマンド例では１から５行目に対して、コマンドを実行することができます。
コマンド例
|
1 |
sed -fscript.sed itemtext.txt |
script.sed
|
1 |
1,5a text |
itemtext.txt ▼表示
実行結果
apple apple apple text apple apple onion text apple apple yuzu text apple onion apple text apple onion onion text apple onion yuzu apple yuzu apple apple yuzu onion apple yuzu yuzu onion apple apple onion apple onion onion apple yuzu onion onion apple onion onion onion onion onion yuzu onion yuzu apple onion yuzu onion onion yuzu yuzu yuzu apple apple yuzu apple onion yuzu apple yuzu yuzu onion apple yuzu onion onion yuzu onion yuzu yuzu yuzu apple yuzu yuzu onion yuzu yuzu yuzu
最終行を指定
($)
最終行を指定する場合、$記号で指定することができます。
コマンド例
|
1 |
sed -fscript.sed itemtext.txt |
script.sed
|
1 |
$a text |
itemtext.txt ▼表示
実行結果
apple apple apple apple apple onion apple apple yuzu apple onion apple apple onion onion apple onion yuzu apple yuzu apple apple yuzu onion apple yuzu yuzu onion apple apple onion apple onion onion apple yuzu onion onion apple onion onion onion onion onion yuzu onion yuzu apple onion yuzu onion onion yuzu yuzu yuzu apple apple yuzu apple onion yuzu apple yuzu yuzu onion apple yuzu onion onion yuzu onion yuzu yuzu yuzu apple yuzu yuzu onion yuzu yuzu yuzu text
正規表現で指定
(/regexp/または\%regexp%等)
正規表現でアドレスを指定します。
例えば、コマンド例ではappleという単語が含まれている行に対して、コマンドを実行します。
コマンド例
|
1 |
sed -fscript.sed itemtext.txt |
script.sed
|
1 |
/apple/a text |
itemtext.txt ▼表示
実行結果
apple apple apple text apple apple onion text apple apple yuzu text apple onion apple text apple onion onion text apple onion yuzu text apple yuzu apple text apple yuzu onion text apple yuzu yuzu text onion apple apple text onion apple onion text onion apple yuzu text onion onion apple text onion onion onion onion onion yuzu onion yuzu apple text onion yuzu onion onion yuzu yuzu yuzu apple apple text yuzu apple onion text yuzu apple yuzu text yuzu onion apple text yuzu onion onion yuzu onion yuzu yuzu yuzu apple text yuzu yuzu onion yuzu yuzu yuzu
正規表現で指定する場合、「/」の記号で囲むほかに「\」と「%」等のような一文字の記号を組み合わせても正規表現を行うことができます。
別の記号を用いて正規表現を用いると場合によって、エスケープシーケンスを使うことを減らすことができます。
別の記号を用いた場合のscript.sedの例１
|
1 |
\%apple%a text |
別の記号を用いた場合のscript.sedの例２
|
1 |
\!apple!a text |
別の記号を用いた場合のscript.sedの例３(非推奨)
|
1 |
\gapplega text |
最後の例は一応アルファベットなどの記号も利用できるという例で、どこまでが区切りであるかがわかりにくいため、使用することを推奨しません。
正規表現で範囲を指定
(num,/regexp/)
アドレスの範囲は数字と正規表現を組み合わせることでも作ることができます。
また、数字と正規表現で範囲を作る際、0という数字を使うことができます。
コマンド例
|
1 |
sed -fscript.sed itemtext.txt |
script.sed
|
1 |
0,/onion/a text |
itemtext.txt ▼表示
実行結果
apple apple apple text apple apple onion text apple apple yuzu apple onion apple apple onion onion apple onion yuzu apple yuzu apple apple yuzu onion apple yuzu yuzu onion apple apple onion apple onion onion apple yuzu onion onion apple onion onion onion onion onion yuzu onion yuzu apple onion yuzu onion onion yuzu yuzu yuzu apple apple yuzu apple onion yuzu apple yuzu yuzu onion apple yuzu onion onion yuzu onion yuzu yuzu yuzu apple yuzu yuzu onion yuzu yuzu yuzu
0,/regexp/と1,/regexp/は微妙に意味が違います。
0,/regexp/の場合
コマンド例
|
1 |
sed -fscript.sed itemtext.txt |
script.sed
|
1 |
0,/apple apple apple/a text |
実行結果
apple apple apple text apple apple onion apple apple yuzu apple onion apple apple onion onion apple onion yuzu apple yuzu apple apple yuzu onion apple yuzu yuzu onion apple apple onion apple onion onion apple yuzu onion onion apple onion onion onion onion onion yuzu onion yuzu apple onion yuzu onion onion yuzu yuzu yuzu apple apple yuzu apple onion yuzu apple yuzu yuzu onion apple yuzu onion onion yuzu onion yuzu yuzu yuzu apple yuzu yuzu onion yuzu yuzu yuzu
1,/regexp/の場合
コマンド例
|
1 |
sed -fscript.sed itemtext.txt |
script.sed
|
1 |
1,/apple apple apple/a text |
実行結果
apple apple apple text apple apple onion text apple apple yuzu text apple onion apple text apple onion onion text apple onion yuzu text apple yuzu apple text apple yuzu onion text apple yuzu yuzu text onion apple apple text onion apple onion text onion apple yuzu text onion onion apple text onion onion onion text onion onion yuzu text onion yuzu apple text onion yuzu onion text onion yuzu yuzu text yuzu apple apple text yuzu apple onion text yuzu apple yuzu text yuzu onion apple text yuzu onion onion text yuzu onion yuzu text yuzu yuzu apple text yuzu yuzu onion text yuzu yuzu yuzu text
これは、0,/regexp/の場合、「apple apple apple」という行が範囲の終了を表す/regexp/にマッチするため、itemtext.txtの最初の行の「apple apple apple」にマッチした時点で範囲が終了します。
しかし、1,/regexp/の場合はitemtext.txtの最初の行の「apple apple apple」が範囲の開始を表す1の方にマッチするため、範囲の終了を表すitemtext.txtの２つ目の「apple apple apple」という行が登場するまで、コマンドの実行が行われます。
このような点で0,/regexp/と1,/regexp/は異なります。
アドレスの範囲の終端を相対的に指定
(addr1,+num)
範囲の始点から次のnum行までを指定することができます。
コマンド例では、５行目から次の３行目、つまり８行目までを指定しています。
コマンド例
|
1 |
sed -fscript.sed itemtext.txt |
script.sed
|
1 |
5,+3a text |
itemtext.txt ▼表示
実行結果
apple apple apple apple apple onion apple apple yuzu apple onion apple apple onion onion text apple onion yuzu text apple yuzu apple text apple yuzu onion text apple yuzu yuzu onion apple apple onion apple onion onion apple yuzu onion onion apple onion onion onion onion onion yuzu onion yuzu apple onion yuzu onion onion yuzu yuzu yuzu apple apple yuzu apple onion yuzu apple yuzu yuzu onion apple yuzu onion onion yuzu onion yuzu yuzu yuzu apple yuzu yuzu onion yuzu yuzu yuzu
アドレスをステップで指定
(first~step)
first行からstep行ずつを指定することができます。
コマンド例では、５行目から３行ずつ行を指定しています。
コマンド例
|
1 |
sed -fscript.sed itemtext.txt |
script.sed
|
1 |
5~3a text |
itemtext.txt ▼表示
実行結果
apple apple apple apple apple onion apple apple yuzu apple onion apple apple onion onion text apple onion yuzu apple yuzu apple apple yuzu onion text apple yuzu yuzu onion apple apple onion apple onion text onion apple yuzu onion onion apple onion onion onion text onion onion yuzu onion yuzu apple onion yuzu onion text onion yuzu yuzu yuzu apple apple yuzu apple onion text yuzu apple yuzu yuzu onion apple yuzu onion onion text yuzu onion yuzu yuzu yuzu apple yuzu yuzu onion text yuzu yuzu yuzu
範囲の終端を行数の倍数で指定
(addr1,~num)
範囲の始点からnum行の倍数までの行を指定します。
コマンド例では、５行目から４行目の倍数、つまりこの場合は８行目まで指定されます。
コマンド例
|
1 |
sed -fscript.sed itemtext.txt |
script.sed
|
1 |
5,~4a text |
itemtext.txt ▼表示
実行結果
apple apple apple apple apple onion apple apple yuzu apple onion apple apple onion onion text apple onion yuzu text apple yuzu apple text apple yuzu onion text apple yuzu yuzu onion apple apple onion apple onion onion apple yuzu onion onion apple onion onion onion onion onion yuzu onion yuzu apple onion yuzu onion onion yuzu yuzu yuzu apple apple yuzu apple onion yuzu apple yuzu yuzu onion apple yuzu onion onion yuzu onion yuzu yuzu yuzu apple yuzu yuzu onion yuzu yuzu yuzu
アドレスで指定しなかったものを指定
アドレスの最後に「!」をつけることで、アドレスで指定したものとは逆、つまり、アドレスで指定しなかったものを指定することができます。
コマンド例
|
1 |
sed -fscript.sed itemtext.txt |
script.sed
|
1 |
5,8!a text |
itemtext.txt ▼表示
実行結果
apple apple apple text apple apple onion text apple apple yuzu text apple onion apple text apple onion onion apple onion yuzu apple yuzu apple apple yuzu onion apple yuzu yuzu text onion apple apple text onion apple onion text onion apple yuzu text onion onion apple text onion onion onion text onion onion yuzu text onion yuzu apple text onion yuzu onion text onion yuzu yuzu text yuzu apple apple text yuzu apple onion text yuzu apple yuzu text yuzu onion apple text yuzu onion onion text yuzu onion yuzu text yuzu yuzu apple text yuzu yuzu onion text yuzu yuzu yuzu text
アドレスで指定された行を別の文字列に置換
(cコマンド)
cコマンドは行を別の文字列に置換します。
アドレスが指定されていない場合はそれぞれの行について、文字列を置換します。
コマンド例
|
1 |
sed -fscript.sed itemtext.txt |
script.sed
|
1 |
c text |
itemtext.txt ▼表示
実行結果
text text text text text text text text text text text text text text text text text text text text text text text text text text text
範囲が指定されている場合は、それらの行を削除してから、文字列を置換します。
コマンド例
|
1 |
sed -fscript.sed itemtext.txt |
script.sed
|
1 |
1,9c text |
実行結果
text onion apple apple onion apple onion onion apple yuzu onion onion apple onion onion onion onion onion yuzu onion yuzu apple onion yuzu onion onion yuzu yuzu yuzu apple apple yuzu apple onion yuzu apple yuzu yuzu onion apple yuzu onion onion yuzu onion yuzu yuzu yuzu apple yuzu yuzu onion yuzu yuzu yuzu
!を用いて、アドレスの範囲の逆を指定すると、アドレス指定がある範囲でcコマンドでアドレスを指定しなかった時と同じような動作になります。
コマンド例
|
1 |
sed -fscript.sed itemtext.txt |
script.sed
|
1 |
1,9!c text |
実行結果
apple apple apple apple apple onion apple apple yuzu apple onion apple apple onion onion apple onion yuzu apple yuzu apple apple yuzu onion apple yuzu yuzu text text text text text text text text text text text text text text text text text text
現在の入力行の行番号を表示
(=コマンド)
=コマンドは、入力行の行番号を表示することができます。
コマンド例
|
1 |
sed -fscript.sed itemtext.txt |
script.sed
|
1 |
= |
itemtext.txt ▼表示
実行結果
1 apple apple apple 2 apple apple onion 3 apple apple yuzu 4 apple onion apple 5 apple onion onion 6 apple onion yuzu 7 apple yuzu apple 8 apple yuzu onion 9 apple yuzu yuzu 10 onion apple apple 11 onion apple onion 12 onion apple yuzu 13 onion onion apple 14 onion onion onion 15 onion onion yuzu 16 onion yuzu apple 17 onion yuzu onion 18 onion yuzu yuzu 19 yuzu apple apple 20 yuzu apple onion 21 yuzu apple yuzu 22 yuzu onion apple 23 yuzu onion onion 24 yuzu onion yuzu 25 yuzu yuzu apple 26 yuzu yuzu onion 27 yuzu yuzu yuzu
sedコマンドの-nオプションで余分な出力を除くと行番号のみを表示することができます。
コマンド例
|
1 |
sed -n -fscript.sed itemtext.txt |
script.sed
|
1 |
= |
実行結果
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27
アドレスで正規表現を使うと、その正規表現とマッチする行の行番号を表示することもできます。
例えば、行の終わりにappleの単語がある行の行番号を表示するとしたら、
コマンド例
|
1 |
sed -n -fscript.sed itemtext.txt |
script.sed
|
1 |
/apple$/= |
実行結果
1 4 7 10 13 16 19 22 25
のように表示させることができます。正規表現の$は行の終わりを示す記号になります。
パターンスペースを明確な形式で表示
(lコマンド)
lコマンドは、パターンスペースを明確な形式(unambiguous form)で表します。
ここで、明確な形式とは、
表示できない文字をC言語のエスケープ形式で示す。
長い行は\の文字で区切る。
それぞれの行の終端は$の記号で終了する。
というものになります。
コマンド例
|
1 |
sed -n -fscript.sed itemtext.txt |
script.sed
|
1 |
l |
itemtext.txt ▼表示
実行結果
apple apple apple$ apple apple onion$ apple apple yuzu$ apple onion apple$ apple onion onion$ apple onion yuzu$ apple yuzu apple$ apple yuzu onion$ apple yuzu yuzu$ onion apple apple$ onion apple onion$ onion apple yuzu$ onion onion apple$ onion onion onion$ onion onion yuzu$ onion yuzu apple$ onion yuzu onion$ onion yuzu yuzu$ yuzu apple apple$ yuzu apple onion$ yuzu apple yuzu$ yuzu onion apple$ yuzu onion onion$ yuzu onion yuzu$ yuzu yuzu apple$ yuzu yuzu onion$ yuzu yuzu yuzu$
UTF-8の場合で、日本語は8進数形式で表示されます。
例えば、「あ」の場合だと「\343\201\202」のように表示されます。
コマンド例
|
1 |
echo 'あ' | sed -n 'l' |
実行結果
|
1 |
\343\201\202$ |
lコマンドの後に数字を入力するとその数字分の文字で行を折り返します。
コマンド例
|
1 |
sed -n -fscript.sed itemtext.txt |
script.sed
|
1 |
l 10 |
実行結果
apple app\ le apple$ apple app\ le onion$ apple app\ le yuzu$ apple oni\ on apple$ apple oni\ on onion$ apple oni\ on yuzu$ apple yuz\ u apple$ apple yuz\ u onion$ apple yuz\ u yuzu$ onion app\ le apple$ onion app\ le onion$ onion app\ le yuzu$ onion oni\ on apple$ onion oni\ on onion$ onion oni\ on yuzu$ onion yuz\ u apple$ onion yuz\ u onion$ onion yuz\ u yuzu$ yuzu appl\ e apple$ yuzu appl\ e onion$ yuzu appl\ e yuzu$ yuzu onio\ n apple$ yuzu onio\ n onion$ yuzu onio\ n yuzu$ yuzu yuzu\ apple$ yuzu yuzu\ onion$ yuzu yuzu\ yuzu$
パターンスペースの内容をファイルに出力
(wコマンド)
wコマンドは、パターンスペースの内容をファイルに書き出すことができます。
コマンド例では、itemtext.txtの３行目の内容を標準出力に出力します。
コマンド例
|
1 |
sed -n -fscript.sed itemtext.txt |
script.sed
|
1 |
3w /dev/stdout |
itemtext.txt ▼表示
実行結果
|
1 |
apple apple yuzu |
/dev/stdoutを指定すると標準出力を指定することができます。
ほかにも、/dev/stderrを指定すると標準エラー出力を指定することができます。
ファイルから読み込んで内容を挿入
(rコマンド)
rコマンドは、指定したファイルの内容を次の行に挿入します。
コマンド例では、itemtext.txtの３行目の次の行にファイルの内容を挿入しています。
コマンド例
|
1 |
sed -fscript.sed itemtext.txt |
script.sed
|
1 |
3r text.txt |
text.txt
|
1 |
=====Insert text.txt====== |
itemtext.txt ▼表示
実行結果
apple apple apple apple apple onion apple apple yuzu =====Insert text.txt====== apple onion apple apple onion onion apple onion yuzu apple yuzu apple apple yuzu onion apple yuzu yuzu onion apple apple onion apple onion onion apple yuzu onion onion apple onion onion onion onion onion yuzu onion yuzu apple onion yuzu onion onion yuzu yuzu yuzu apple apple yuzu apple onion yuzu apple yuzu yuzu onion apple yuzu onion onion yuzu onion yuzu yuzu yuzu apple yuzu yuzu onion yuzu yuzu yuzu
補足として、rコマンドはファイルの内容を次の行に対して挿入するが、工夫を行えば、手前に対して挿入しているかのように動作させることができます。
コマンド例
|
1 |
sed '$a tmp' itemtext.txt |sed -fscript.sed | sed '1d' |
script.sed
|
1 2 3 |
x $q r text.txt |
実行結果
=====Insert text.txt====== apple apple apple =====Insert text.txt====== apple apple onion =====Insert text.txt====== apple apple yuzu =====Insert text.txt====== apple onion apple =====Insert text.txt====== apple onion onion =====Insert text.txt====== apple onion yuzu =====Insert text.txt====== apple yuzu apple =====Insert text.txt====== apple yuzu onion =====Insert text.txt====== apple yuzu yuzu =====Insert text.txt====== onion apple apple =====Insert text.txt====== onion apple onion =====Insert text.txt====== onion apple yuzu =====Insert text.txt====== onion onion apple =====Insert text.txt====== onion onion onion =====Insert text.txt====== onion onion yuzu =====Insert text.txt====== onion yuzu apple =====Insert text.txt====== onion yuzu onion =====Insert text.txt====== onion yuzu yuzu =====Insert text.txt====== yuzu apple apple =====Insert text.txt====== yuzu apple onion =====Insert text.txt====== yuzu apple yuzu =====Insert text.txt====== yuzu onion apple =====Insert text.txt====== yuzu onion onion =====Insert text.txt====== yuzu onion yuzu =====Insert text.txt====== yuzu yuzu apple =====Insert text.txt====== yuzu yuzu onion =====Insert text.txt====== yuzu yuzu yuzu
まず、初めのsedコマンドで最後の行にテキストを追記します。
このテキストの追加は、次のsedコマンドでパターンスペースとホールドスペースを入れ替えるxコマンドを使って、行をずらして出力させるためです。
行をずらして表示しますと最後の行が出力されません。
そのために最後の行に対して追加で何かテキストを追加します。
２つ目のsedコマンドを用いるとほとんど実行結果のように確認できます。
しかし、一番上の行に空行ができます。
これは最初のパターンスペースとホールドスペースの入れ替えにより、ホールドスペースの初期値が出力されるためです。
また、ホールドスペースの初期値は何もないため、一番上の行に空行が表示されます。
また、script.sedについて、「$q」を用いて、rコマンドで最後の行でファイルの内容を挿入させる前にsedコマンドのスクリプトを終了させます。
また、qコマンドはsedコマンドのスクリプトは終了させるコマンドです。
３つ目のsedコマンドで一番上にできた空行を削除します。そうすると上の実行結果のように出力されます。
また、script.sedの「$q」を削除して、３つ目のsedコマンドで出力の最後の行を削除しても、同様の実行結果ができます。
コマンド例
|
1 |
sed '$a tmp' itemtext.txt | sed 'x;r text.txt' | sed '1d;$d' |
スクリプトの複数コマンドを実行(-eオプション等)
スクリプトの複数コマンドを記述するには、様々な方法があります。
itemtext.txtの最初の行と最後の行を表示する例を出して、説明します。
itemtext.txt ▼表示
複数の-eオプションで記述
複数の-eオプションを使用することで、スクリプトの複数コマンドを記述することができます。
また、スクリプトのコマンドは、-eオプションが記述された順番で実行されます。
コマンド例
|
1 |
sed -n -e '1p' -e '$p' itemtext.txt |
実行結果
|
1 2 |
apple apple apple yuzu yuzu yuzu |
コマンドを ; で区切って記述
スクリプトのコマンドを;で区切って記述することで複数のコマンドを実行させることができます。
コマンド例
|
1 |
sed -n -e '1p;$p' itemtext.txt |
実行結果
|
1 2 |
apple apple apple yuzu yuzu yuzu |
ファイルに記述
スクリプトをファイルに記述することで、複数のコマンドを実行させることができます。
コマンド例
|
1 |
sed -n -fscript.sed itemtext.txt |
script.sed
|
1 2 |
1p $p |
実行結果
|
1 2 |
apple apple apple yuzu yuzu yuzu |
記述方法としては、;で複数のコマンドを記述したほうがタイピング量も見栄えも良いと思います。
しかし、使い方によっては、ほかの方法も使用することがあると思います。
また、-eオプションと-fオプションを同時に使用した場合の結果は以下の通りになります。
コマンド例
|
1 |
sed -n -fscript.sed -e '1s/apple/melon/g;1p' itemtext.txt |
script.sed
|
1 2 |
1p $p |
実行結果
|
1 2 3 |
apple apple apple melon melon melon yuzu yuzu yuzu |
-fオプションと-eオプションの順番を入れ替えた場合は以下の通りです。
コマンド例
|
1 |
sed -n -e '1s/apple/melon/g;1p' -fscript.sed itemtext.txt |
実行結果
|
1 2 3 |
melon melon melon melon melon melon yuzu yuzu yuzu |
この結果から、初めに呼ばれた-eオプションまたは-fオプションでのスクリプトを読み込み、その後に次の-eオプションまたは-fオプションでのスクリプトを読み込み、実行させることがわかります。
文字の置換(yコマンド)
yコマンドは、文字を別の文字に置換することができます。
yコマンドは、y/変換前の文字/変換後の文字/で記述します。
コマンド例
|
1 |
sed -n -fscript.sed itemtext.txt |
script.sed
|
1 2 |
1y/aple/mlon/ 1p |
itemtext.txt ▼表示
実行結果
|
1 |
mllon mllon mllon |
パターンスペースを表示(pコマンド)
pコマンドは、パターンスペースを表示することができます。
また、よく使うコマンドのひとつです。
コマンド例
|
1 |
sed -n -fscript.sed itemtext.txt |
script.sed
|
1 |
1p |
itemtext.txt ▼表示
実行結果
|
1 |
apple apple apple |
パターンスペースを削除(dコマンド)
dコマンドは、パターンスペースを削除することできます。
dコマンドを使った場合、その後にスクリプトが続いていても、次のサイクルに移行します。
また、dコマンドもよく使うコマンドのひとつです。
コマンド例
|
1 |
sed -fscript.sed itemtext.txt |
script.sed
|
1 |
1!d |
itemtext.txt ▼表示
実行結果
|
1 |
apple apple apple |
スクリプトを終了(qコマンド)
qコマンドは、スクリプトを終了させることができます。
その後のスクリプトは実行されません。
また、qコマンドの後にexitコードをつけることができます。
コマンド例
|
1 |
sed -fscript.sed itemtext.txt |
script.sed
|
1 2 |
3q 4p #実行されません |
itemtext.txt ▼表示
実行結果
|
1 2 3 |
apple apple apple apple apple onion apple apple yuzu |
コマンド例
|
1 |
sed '2q 99' itemtext.txt |
終了ステータスの確認
|
1 2 |
$echo $? 99 |
パターンスペースを次の行に飛ばす(nコマンド)
nコマンドは、sedコマンドに-nオプションがない場合は、現在のパターンスペースを表示して次のスクリプトのコマンドを実行します。
-nオプションがある場合、パターンスペースが次の行になります。
-nオプションがない例
３の倍数の行をdeleteという単語に書き換える例です。
コマンド例
|
1 |
sed 'n;n;s/.*/delete/' itemtext.txt |
itemtext.txt ▼表示
実行結果
apple apple apple apple apple onion delete apple onion apple apple onion onion delete apple yuzu apple apple yuzu onion delete onion apple apple onion apple onion delete onion onion apple onion onion onion delete onion yuzu apple onion yuzu onion delete yuzu apple apple yuzu apple onion delete yuzu onion apple yuzu onion onion delete yuzu yuzu apple yuzu yuzu onion delete
-nオプションがある場合の例
３の倍数の行を表示する例です。
コマンド例
|
1 |
sed -n 'n;n;p' itemtext.txt |
itemtext.txt ▼表示
実行結果
apple apple yuzu apple onion yuzu apple yuzu yuzu onion apple yuzu onion onion yuzu onion yuzu yuzu yuzu apple yuzu yuzu onion yuzu yuzu yuzu yuzu
コマンドをグループ化する
コマンドのグループ化は、アドレスを指定して複数のコマンドを使用する場合に便利です。
コマンド例
|
1 |
sed -n -fscript.sed itemtext.txt |
script.sed
|
1 |
1{s/apple/melon/; p; n; p} |
itemtext.txt ▼表示
実行結果
|
1 2 |
melon apple apple apple apple onion |
ホールドスペースの利用
sedコマンドでは、現在編集中の行をそれ以降の行でも使用したい場合にホールドスペースが利用できます。
しかし、ホールドスペースというバッファは一つしか利用できないので注意が必要です。
パターンスペースをホールドスペースへ
(hコマンド)
hコマンドは、パターンスペースの内容をホールドスペースにコピーできます。
コピーする際、ホールドスペースが保存していた内容は削除されます。
ホールドスペースに何かを保存した場合、gコマンド等でパターンスペースに呼び戻さないとホールドスペースの内容を使うことができません。
コマンド例は次のgコマンドを参照してください。
ホールドスペースをパターンスペースへ
(gコマンド)
gコマンドは、ホールドスペースの内容をパターンスペースにコピーできます。
コピーする際、パターンスペースが保存していた内容は削除されます。
コマンド例は、最初の１行目の内容をホールドスペースに保存します。
そして、それ以降の行の「onion onion onion」にマッチングした行で、そのマッチングした行の内容を表示した後に、ホールドスペースの内容を表示します。
コマンド例
|
1 |
sed -n -fscript.sed itemtext.txt |
itemtext.txt ▼表示
script.sed
|
1 2 3 |
1h /onion onion onion/p /onion onion onion/{g;p} |
実行結果
|
1 2 |
onion onion onion apple apple apple |
なぜなら、コマンドを別々にした場合、うまく動作しませんでした。
コマンド例
|
1 |
sed -n -fscript.sed itemtext.txt |
script.sed
|
1 2 3 4 |
1h /onion onion onion/p /onion onion onion/g /onion onion onion/p |
実行結果
|
1 |
onion onion onion |
アドレスでの正規表現はパターンスペースの内容を参照して、マッチングを行っているかもしれません。
なので、アドレスでの正規表現を用いる場合は、コマンドのグループ化を用いて呼び出したほうが良いと思います。
パターンスペースをホールドスペースへ追記
(Hコマンド)
Hコマンドは、ホールドスペースの内容をパターンスペースに追記することができます。
追記する際に、現在のホールドスペースの内容に改行を入れます。
コマンド例は、1行目の内容をホールドスペースに保存し、2行目の内容をホールドスペースに追記します。
その後に、それ以降の行の「onion onion onion」にマッチングした行で、そのマッチングした行の内容を表示した後に、ホールドスペースの内容を表示します。
コマンド例
|
1 |
sed -n -fscript.sed itemtext.txt |
script.sed
|
1 2 3 |
1h 2H /onion onion onion/{p;g;p} |
itemtext.txt ▼表示
実行結果
|
1 2 3 |
onion onion onion apple apple apple apple apple onion |
ホールドスペースをパターンスペースへ追記
(Gコマンド)
Gコマンドは、ホールドスペースの内容をパターンスペースに追記することができます。
追記する際に、現在のパターンスペースの内容に改行を入れます。
コマンド例は、1行目の内容をホールドスペースに保存します。
その後に、それ以降の行の「onion onion onion」にマッチングした行で、ホールドスペースの内容をパターンスペースに追記して、パターンスペースの内容を表示します。
コマンド例
|
1 |
sed -n -fscript.sed itemtext.txt |
script.sed
|
1 2 |
1h /onion onion onion/{G;p} |
itemtext.txt ▼表示
実行結果
|
1 2 |
onion onion onion apple apple apple |
パターンスペースとホールドスペースを交換
(xコマンド)
xコマンドは、パターンスペースの内容とホールドスペースの内容を入れ替えることができます。
コマンド例では、1行目の内容「apple apple apple」をホールドスペースに保存します。
その後に、それ以降の行の「onion onion onion」にマッチングした行で、パターンスペースの内容「apple apple apple」とホールドスペースの内容「onion onion onion」を入れ替え、入れ替えたパターンスペースの内容「onion onion onion」表示します。
さらに、パターンスペースの内容「onion onion onion」とホールドスペースの内容「apple apple apple」を入れ替えて、入れ替えたパターンスペースの内容「apple apple apple」を表示します。
コマンド例
|
1 |
sed -n -fscript.sed itemtext.txt |
script.sed
|
1 2 |
1h /onion onion onion/{x;p;x;p} |
itemtext.txt ▼表示
実行結果
|
1 2 |
apple apple apple onion onion onion |
条件分岐処理
ラベル
sedコマンドのスクリプトは、プログラミングのgoto文のようにスクリプトのコマンドのどこかにラベルをつけることができます。
ラベルは:markや:labelのように、:と文字列でつけることができます。
このラベルは、bコマンドやtコマンド等で使用することができます。
ラベルの付け方は以下のようになります。
script.sed
|
1 2 3 4 5 6 |
:mark #ラベルです #以下のようにラベルを呼びます b mark t mark T mark |
無条件分岐
(bコマンド)
bコマンドは、無条件分岐のコマンドで、bコマンドで指定したラベルにジャンプします。
また、bコマンドにラベルが何も指定していない場合、次のサイクルに移行します。
コマンド例では、初めにappleのある行が削除され、それ以外の行が表示されます。
コマンド例
|
1 |
sed -n -fscript.sed itemtext.txt |
script.sed
|
1 2 3 4 |
/^apple/b mark p :mark d |
itemtext.txt ▼表示
実行結果
onion apple apple onion apple onion onion apple yuzu onion onion apple onion onion onion onion onion yuzu onion yuzu apple onion yuzu onion onion yuzu yuzu yuzu apple apple yuzu apple onion yuzu apple yuzu yuzu onion apple yuzu onion onion yuzu onion yuzu yuzu yuzu apple yuzu yuzu onion yuzu yuzu yuzu
条件分岐
(tコマンド)
tコマンドは、入力行が置換に成功していた場合、つまり、sコマンドが成功していた場合にラベルにジャンプします。
tコマンドの条件が成り立つときにラベルが何も指定していない場合、次のサイクルに移行します。
コマンド例は、appleの単語をすべて削除する例です。
また、簡単な整形処理も行っています。
コマンド例
|
1 |
sed -n -fscript.sed itemtext.txt |
script.sed
|
1 2 3 4 5 6 7 8 |
:mark s/apple// s/ / / s/^ // s/ $// /^$/d t mark p |
itemtext.txt ▼表示
実行結果
onion yuzu onion onion onion onion yuzu yuzu yuzu onion yuzu yuzu onion onion onion onion yuzu onion onion onion onion onion onion onion yuzu onion yuzu onion yuzu onion onion yuzu yuzu yuzu yuzu onion yuzu yuzu yuzu onion yuzu onion onion yuzu onion yuzu yuzu yuzu yuzu yuzu onion yuzu yuzu yuzu
マルチライン処理
パターンスペースに次の入力行を追記
(Nコマンド)
Nコマンドは、パターンスペースに改行を追加し次の入力行を追記します。
コマンド例
|
1 |
sed -n -fscript.sed itemtext.txt |
script.sed
|
1 |
1{N;p} |
itemtext.txt ▼表示
実行結果
|
1 2 |
apple apple apple apple apple onion |
パターンスペースの最初の改行まで表示(Pコマンド)
Pコマンドは、パターンスペースの最初の改行までを表示します。
コマンド例
|
1 |
sed -n -fscript.sed itemtext.txt |
script.sed
|
1 2 |
1s/ /\n/ 1P |
itemtext.txt ▼表示
実行結果
|
1 |
apple |
パターンスペースの行を１行削除し、次のサイクルを実行
(Dコマンド)
Dコマンドは、改行までの行を１行削除して、残りのパターンスペースを残したまま次のサイクルを実行します。
コマンド例は、行の最後の単語と次の行の最初の単語が同じ場合は、くっつけるようなイメージの例です。
コマンド例
|
1 |
sed -n -fscript.sed itemtext.txt |
script.sed
|
1 2 3 4 5 6 7 8 |
:label $!N s/apple\napple/apple/ s/onion\nonion/onion/ s/yuzu\nyuzu/yuzu/ t label P D |
itemtext.txt ▼表示
実行結果
apple apple apple apple onion apple apple yuzu apple onion apple onion onion apple onion yuzu apple yuzu apple yuzu onion apple yuzu yuzu onion apple apple onion apple onion apple yuzu onion onion apple onion onion onion onion yuzu onion yuzu apple onion yuzu onion yuzu yuzu apple apple yuzu apple onion yuzu apple yuzu onion apple yuzu onion onion yuzu onion yuzu yuzu apple yuzu yuzu onion yuzu yuzu yuzu
参考
外部リンクgnu sedマニュアル(英文)
コメント
教えてください
スクリプトをファイルから読み込む (-fオプション)で、
qq.bat → sed -fscript.sed aaaaaa
script.sed → s/apple/melon/
aaaaaのファイルはできるのですが、中身が空のファイルができます。
Windows10ではできません….（ちなみにWindows7ではちゃんとできます）
どの点がまずいのか教えていただきたいのですが、宜しくお願い致します。
まず、sedコマンドを単純に使用する場合はファイルを読み込んで、標準出力に出力されます。
そのため、質問の内容から何かの方法でsedコマンドの出力結果をファイルに書き込んでいると推察されます。
sedコマンドで、ファイルに内容を書き込む方法として主に２つの方法があります。
１つ目はリダイレクトする方法、２つ目はsedコマンドのiオプションを用いる方法です。
１つ目のリダイレクトを行う場合、読み込むファイルと書き込むファイルを一緒に利用するとその内容は消えてしまいます。
悪い例：sed -fscript.sed aaaaaa > aaaaaa
そのため、リダイレクトしてファイルの内容を書き換えたい場合は、別のファイルに内容を書き込んでからそのファイルを置き換えます。
例：sed -fscript.sed aaaaaa > bbbbbb ; mv bbbbbb aaaaaa
２つ目のsedコマンドのiオプションを用いる方法だとファイルの内容を直接書き換えます。
例：sed -i -fscript.sed aaaaaa
あなたのコマンドがWindows10ではできず、Windows7でできる理由として、
シェル(この場合だとコマンドプロンプト)の仕様が異なるからかもしれません。
この場合、おそらくリダイレクトを行う方法を用いてコマンド実行していると思います（違っていたら関係ないです、すみません）。
Windows10でこの方法を行った場合、リダイレクト先のファイルが先に作られた後にsedコマンドが実行されると考えらます(Ubuntu等のLinuxも基本的にこの方式でWindows10もおそらくこの方式だと思います)。
そのため、上の悪い例のコマンドを実行すると空のファイルが出力されます。
悪い例（再掲）：sed -fscript.sed aaaaaa > aaaaaa
処理順：
リダイレクト先に空のファイル作成→sedの実行→空のファイルを出力
しかし、Windows7ではリダイレクト先のテンポラリファイルを作成して、コマンドを実行しテンポラリファイルに出力してから、
テンポラリファイルをリダイレクト先のファイルへ置換していると考えられます(実際に検証していませんが、私が調べた限りだとおそらくこの仕様だと思われます)。
この場合、上の悪い例のコマンドを実行すると空のファイルではなく、読み込んだファイルにsedコマンドを実行した結果が得られます。
悪い例（再掲）：sed -fscript.sed aaaaaa > aaaaaa
処理順：
リダイレクト先の出力用テンポラリファイルを作成→sedの実行（結果はテンポラリファイルへ）→テンポラリファイルをリダイレクト先のファイルへ置換→sedで処理した意図したファイルを出力
おそらく、このシェルの仕様の違いでWindows7ではコマンドを実行して意図した結果が得られたのだと思います。
しかし、結論としてはWindows7での動作が特殊な例で、Windows10の動作がsedコマンドとして一般的な動作になると思います。
ありがとうございます。
試してみます。
気づかず返信遅くなりまして申し訳ありませんでした。