Awkにはいくつかの非常に強力な組み込み変数があります。一般的に、組み込み変数は2つのタイプに分けられます: - 1つ目は定義された変数を変更できるもので、例えばフィールド区切り(FS)とレコード区切り(RS)です - 2つ目はデータ処理やデータ集計に使用できるもので、例えばレコード数(NR)とフィールド数(NF)です この記事では、以下のものを紹介しています:FS,OFS, RS, ORS, NR, NR, FNR
FS: 入力フィールド区切り文字変数
FS(Field Separator) 入力ファイルの各行を読み取って解析するとき、デフォルトではスペースで区切ってフィールド変数 $1、$2... などに分割します。FSこの変数は、各レコードのフィールド区切り記号を設定するために使われます。FS任意の文字列または正規表現にすることができます。FSを宣言するには、以下の2つの方法を使用できます:
使用する-Fコマンドオプション
通常の変数として設定して使用する
语法:
$ awk -F 'FS' 'commands' inputfilename
或者
$ awk 'BEGIN{FS="FS";}'
FS任意の文字または正規表現にすることができます
FSFSは何度でも変更できますが、明示的に変更されない限り、そのまま維持されます。ただし、フィールド区切り文字を変更したい場合は、テキストを読み込む前に変更するのが最善です。FSそうすれば、その変更は読み込んだテキストに反映されます。
以下は、...を使用してFS/etc/passwd を読み取り、:を区切り文字とした例です
$ cat etc_passwd.awk
BEGIN{
FS=":";
print "Name\tUserID\tGroupID\tHomeDirectory";
}
{
print $1"\t"$3"\t"$4"\t"$6;
}
END {
print NR,"Records Processed";
}
実行結果:
$ awk -f etc_passwd.awk /etc/passwd Name UserID GroupID HomeDirectory gnats 41 41 /var/lib/gnats libuuid 100 101 /var/lib/libuuid syslog 101 102 /home/syslog hplip 103 7 /var/run/hplip avahi 105 111 /var/run/avahi-daemon saned 110 116 /home/saned pulse 111 117 /var/run/pulse gdm 112 119 /var/lib/gdm 8 Records Processed
OFS: 出力フィールド区切り文字変数
OFS(Output Field Separator) は、出力におけるFSに相当し、FSデフォルトでは1つのスペース文字が出力区切り文字として使われます。以下は...のOFS例です:
$ awk -F':' '{print $3,$4;}' /etc/passwd
41 41
100 101
101 102
103 7
105 111
110 116
111 117
112 119
コマンド内のprint文の「,」は、2つの引数を1つのスペースで連結することを意味し、つまりデフォルトのOFSの値です。したがって、OFS以下のように、出力のフィールド間に挿入することができます:
$ awk -F':' 'BEGIN{OFS="=";} {print $3,$4;}' /etc/passwd
41=41
100=101
101=102
103=7
105=111
110=116
111=117
112=11
RS: レコード区切り文字
RS(Record Separator) は1行のレコードを定義します。ファイルを読み取るとき、デフォルトでは1行を1つのレコードとします。次の例では、student.txt を入力ファイルとし、レコード間は2行の空行で区切り、各レコードの各フィールドは1つの改行文字で区切ります:
$ cat student.txt Jones 2143 78 84 77 Gondrol 2321 56 58 45 RinRao 2122 38 37 65 Edwin 2537 78 67 45 Dayan 2415 30 47 20
そして、次のスクリプトは student.txt から2つの項目を出力します:
$ cat student.awk
BEGIN {
RS="\n\n";
FS="\n";
}
{
print $1,$2;
}
$ awk -f student.awk student.txt
Jones 2143
Gondrol 2321
RinRao 2122
Edwin 2537
Dayan 2415
student.awk では、各学生の詳細情報が1つのレコードとして扱われます。これは、RS(レコード区切り文字)が2つの改行に設定されているためです。また、...なのでFS(フィールド区切り文字)が改行文字であるため、1行が1つのフィールドになります。
ORS: 出力レコード区切り文字変数
ORS(Output Record Separator) は、名前が示すように、出力におけるRSに相当します。RS各レコードは出力時に区切り文字で区切られます。以下の...のORS例をご覧ください:
$ awk 'BEGIN{ORS="=";} {print;}' student-marks
Jones 2143 78 84 77=Gondrol 2321 56 58 45=RinRao 2122 38 37 65=Edwin 2537 78 67 45=Dayan 2415 30 47 20=
上記のスクリプトでは、入力ファイルの各レコードが=で区切られています。 参考: student-marks が上記の出力です。
NR: レコード数変数
NR(Number of Record) は、処理済みの総レコード数、つまり行番号を表します(必ずしも1つのファイルとは限らず、複数の場合もあります)。次の例では、NR行番号を表し、END部分では、NRがNRファイル内の全レコード数になります。
$ awk '{print "Processing Record - ",NR;}END {print NR, "Students Records are processed";}' student-marks
Processing Record - 1
Processing Record - 2
Processing Record - 3
Processing Record - 4
Processing Record - 5
5 Students Records are processed
NF: 1つのレコードのフィールド数
NF(Number for Field) は、1つのレコードのフィールド数を表します。これは、あるレコードにすべてのフィールドが存在するかどうかを判断する際に非常に役立ちます。student-mark ファイルを以下のように見てみましょう:
$ cat student-marks Jones 2143 78 84 77 Gondrol 2321 56 58 45 RinRao 2122 38 37 Edwin 2537 78 67 45 Dayan 2415 30 47
次のAwkプログラムは、レコード数(NR)と、そのレコードのフィールド数を出力します: したがって、データが欠落しているものを非常に簡単に見つけることができます。
$ awk '{print NR,"->",NF}' student-marks
1 -> 5
2 -> 5
3 -> 4
4 -> 5
5 -> 4
FILENAME: 現在の入力ファイルの名前
FILENAME現在入力中のファイルの名前を表します。 AWKは複数のファイルを読み込んで処理することができます。次の例をご覧ください:
$ awk '{print FILENAME}' student-marks
student-marks
student-marks
student-marks
student-marks
student-marks
入力ファイルの各レコードでその名前が出力されます。
FNR: 現在の入力ファイルのレコード数
awkが複数のファイルを読み取るとき、NRNRは現在入力中のすべてのファイルの総レコード数を表し、FNRはFNR現在のファイルのレコード数を表します。次の例のようになります:
$ awk '{print FILENAME, "FNR= ", FNR," NR= ", NR}' student-marks bookdetails
student-marks FNR= 1 NR= 1
student-marks FNR= 2 NR= 2
student-marks FNR= 3 NR= 3
student-marks FNR= 4 NR= 4
student-marks FNR= 5 NR= 5
bookdetails FNR= 1 NR= 6
bookdetails FNR= 2 NR= 7
bookdetails FNR= 3 NR= 8
bookdetails FNR= 4 NR= 9
bookdetails FNR= 5 NR= 10
参考: bookdetails と student-marks は内容が同じで、例として使います。その違いがNRとFNR見て取れます。
よく使用されるのは、NRとFNRを組み合わせてNRとFNR2つのファイルを処理することです。例えば、2つのファイルがあるとします:
$ cat a.txt 李四|000002 张三|000001 王五|000003 赵六|000004 $ cat b.txt 000001|10 000001|20 000002|30 000002|15 000002|45 000003|40 000003|25 000004|60
対応させたい場合は、例えば 张三|000001|10 のように対応付けます。
$ awk -F '|' 'NR == FNR{a[$2]=$1;} NR>FNR {print a[$1],"|", $0}' a.txt b.txt
张三 | 000001|10
张三 | 000001|20
李四 | 000002|30
李四 | 000002|15
李四 | 000002|45
王五 | 000003|40
王五 | 000003|25
赵六 | 000004|60
英語原文: http://www.thegeekstuff.com/2010/01/8-powerful-awk-built-in-variables-fs-ofs-rs-ors-nr-nf-filename-fnr/
訳文: http://shomy.top/2016/05/05/trans-8-powerful-awk-built-in-variables/