Q&A
仕様を明確に
・NGワードは改行マークで区切り？
・単語は英数のみ？
・一部でも一致したら行ごと非表示？
あるファイルからNGワードを含んだ行を除外しようとしています。sedやgrepを用いて解決しようとしたのですが、NGワードが数万行存在するため、単純に引数に追加することが出来ません。どのように解決すべきでしょうか？
shell
1# blacklist.txt(数万行) 2red 3blue 4yellow 5 6# target.txt(数千行) 7aiueobluekakiku 8weemredgopern 9dfeepvdmpemw 10 11 12# 試したこと(引数リストが長すぎてエラー) 13sed /$(cat blacklist.txt | awk '{print $0"|"}' | tr -d '\012')/d
すいません。明確な仕様を下記に追記します。
・NGワードは改行マークで区切られています
・ターゲットになるファイル、ブラックリストのファイルはともに日本語英語数字交じりです。
・一部でも一致したら行ごと非表示です
回答2件
0
ベストアンサー
正規表現じゃなくて固定文字列のようなので、fgrepで。必要に応じて-iや-w等を追加。
sh
1fgrep -v -f blacklist.txt target.txt
投稿2021/07/16 02:46
編集2021/07/16 02:48
総合スコア84788
0
NGワードの羅列が多すぎるなら、head/tailなどで必要箇所だけ抜き出して処理するとか・・・
大掛かりの処理ならSQLとか使うほうが現実的かもしれませんが
投稿2021/07/16 01:04
総合スコア115008
あなたの回答
tips
プレビュー
