shellでsqlのgroup byのような事がやりたい

Question

読み込み元データ

aaa A
aaa A
aaa B
bbb B
bbb B
ccc A

上記のような中身があった場合、左カラムの項目で、右カラムの種類を抽出したいです

ほしい結果

aaa 2  # AとB
bbb 1  # Bのみ
ccc 1  # Aのみ

これが、実際には数百種類で行う感じです。

while等を回して1つずつgrepするのも微妙だし、
ひたすら配列に突っ込んで、一つずつチェックするのもスマートでは無い気がします。

何か良い方法は無いでしょうか？

Answer 1

こんな感じでどうですか？

$ cat infile.txt
aaa A
aaa A
aaa B
bbb B
bbb B
ccc A
$ cat infile.txt | sort | uniq | awk '{cnt[$1]++;}END{for (m in cnt){ printf "%s %d\n",m, cnt[m] ; }}'
aaa 2
ccc 1
bbb 1
$

Comments

[Y.H.]

ひたすら配列に突っ込んでたりしますが。。。

[Y.H.]

あとは csvq とか入れてみるとか。。。
https://github.com/mithrandie/csvq
結構便利だったりします :-)

Answer 2

ちょっと体裁は違いますが…

sort hoge.txt | uniq | cut -f 1 | uniq -c

Comments

[takasima20]

たぶん、ちょっと高級なスクリプトで配列使った方が
なにかと便利な気はしますがね～

[amanoese]

$ sort hoge.txt | uniq | cut -d' ' -f 1 | uniq -c | awk '{print $2,$1}'
aaa 2
bbb 1
ccc 1

で完璧ですね！