常連

### 前提・実現したいこと
以下のスペース区切りの4フィールドの中2つをawkで変換して出力したいです。

```bash
echo AAAAA 1613132842 10000 BBBBB | awk ～
```

## 得たい結果

```
AAAAA 2021-02-12 21:27:22 2021-02-13 00:14:02 BBBBB
```

- フィールド1と4：そのまま出力
- フィールド2： unixtimeから日付表記に変換
- フィールド3： フィールド3にフィールド2の値を足し、unixtimeから日付表記に変換


よろしくお願い致します。

awkで複数フィールドの日付変換を変換

表題の通りなのですが、AWKでテキスト処理を行った結果をAWK外で扱いたいです。

test.txt は以下のようにタテ並びの数字が羅列されており、これらの行を全て足した値を sum sum2に代入し次の処理を行いたいのですが、変数に計算された結果が入らなく困っております。
```ここに言語を入力
test.txt

111  222
333  333
444  444


cat test.txt | awk '{print $1, $2}' | awk '{sum+=$1;sum2+=$2;}END{sum=sum; sum2=sum2;}'

echo $sum
echo $sum2

```

初歩的な内容で申訳ありませんがアドバイス頂けると助かります。

シェルのawk内で定義した変数や結果をAwk外で取り扱いたい

sh のファイルから以下のような awk コマンドでテキストファイルを読み込んでいっています。
OS は MacOS です。

``` bash
awk -v var=path1 -v var2=path2 -f dir/createfile.awk target.txt
```
target.txt は 2000 行ほどのテキストファイルです。
上記をおこなっている間に途中で  
awk: hoge.yaml makes too many open files
というエラーが出てしまいます。
エラーで調べたところ[こちら](https://qiita.com/sou_lab/items/1ca051a1f3b906a23dc8)などが同様のもののようなので試してみてmaxfilesが524288になった事も確認しましたが同様の現象は出ているようです。
全く同じスクリプトで別の Mac で実行した際には問題無いようで、自分が使っている OS が High Sierra で少々古いのも関係しているのかなと思っているのですがどうなのでしょうか？

こちら原因お分かりになる方いましたらご教示いただけますと幸いです。




awk スクリプト実行後に awk: hoge.yaml makes too many open files というエラーが出て困っています。

以下のようなファイルがあります。

```bash
[panko@panda ~]cat MASTER
0004 さとう
0006 みりん
0007 醤油
0011 塩
0012 胡椒
0014 たまご
```

ここで、awkを使って、$itemという動的な変数に対応する2フィールド目の値を表示したいと思います。
例えば、1フィールド目が0014の「たまご」を表示させたく、以下のようなワンライナーを書いたのですが、

```bash
[panko@panda ~]item=0014
[panko@panda ~]awk '$1 == '$item'{print $2}' /tmp/31781-MASTER
胡椒
```
と1フィールド目が「0012」の「胡椒」が表示されてしまいました。

Q)この書き方のどこがおかしくてこのような結果になってしまったのでしょうか？
Q)正しい書き方を教えてください。

awk のパターンに動的な変数を用いる書き方

お世話になります。
初めて投稿するので、書き方が間違っていたり表現が不順分かも知れませんが、よろしくお願い致します。

###前提・実現したいこと
Linux環境(UTF-8)で、日本語と半角英数字の混在したSQLスプールファイルから、固定長で文字列を抽出したい。

###発生している問題・エラーメッセージ
日本語がUTF-8では3バイトで扱われるのか(？)、スプールファイルの行によってバイト数が違うため、cutやfoldでは固定長で切り出せず、awkのprintfで整形しても若干ずれてしまうようです。

###該当のソースコード
（スプールファイル:sample.spool）※テキストエディタに貼って頂くと固定長と分かります

I173400 材料消費連携                                       高機能                                             B1A SR       材料消費連携                                       17/03/26 01:37:28 01734        08219
I124800 AB：取引先転送                                     AB:SYSTEM                                          B4A MREAL    AB：取引先転送 受信                                17/03/26 18:11:18 01248        03916
I125400 AB：工場転送                                       AB:SYSTEM                                          B4A MREAL    AB：工場転送 送信                                  17/03/26 18:11:18 01254        03928

###試したこと
```
cut -b -120 sample.spool
```
I173400 材料消費連携                                       高機能                                             B
I124800 AB：取引先転送                                     AB:SYSTEM                                          B4A
I125400 AB：工場転送                                       AB:SYSTEM                                          B4A M
```ここに言語を入力
fold -b120 sample.spool|grep ^I
```
I173400 材料消費連携                                       高機能                                             B
I124800 AB：
I125400 AB：工場転送
```ここに言語を入力
LANG=C
cut -b -120 sample.spool
```
I173400 材料消費連携                                       高機能                                             B
I124800 AB：取引先転送                                     AB:SYSTEM                                          B4A
I125400 AB：工場転送                                       AB:SYSTEM                                          B4A M
```ここに言語を入力
LANG=C
fold -b120 sample.spool|grep ^I
```
I173400 材料消費連携                                       高機能                                             B
I124800 AB：取引先転送                                     AB:SYSTEM                                          B4A
I125400 AB：工場転送                                       AB:SYSTEM                                          B4A M
```ここに言語を入力
LANG=C
awk '{printf("%7s %-50s %-50s %3s\n",$1,$2,$3,$4)}' sample.spool
```
I173400 材料消費連携                                 高機能                                          B1A
I124800 AB：取引先転送                               AB:SYSTEM                                          B4A
I125400 AB：工場転送                                  AB:SYSTEM                                          B4A

お手数をお掛けしますが、ご教授いただければ幸いです。
よろしくお願い致します。

Linuxで日本語が混ざったファイルを固定長で切り出したい

bashスクリプトを書いています。
bashスクリプト内にて、コマンドとしてawkを利用しています。

 awk -F "," 'BEGIN{OFS=","} $2==${hogehoge} && $6==2 {print $0}'  ./hogehoge.txt > result.txt

上記はシェルスクリプトの1行です。
結論から書きますと、シェル変数の${hogehoge}の展開がうまくいっていません。

本当は
hogehoge="2020/06/14 08:23:15"
cmd=$(awk -F "," 'BEGIN{OFS=","} $2==${hogehoge} && $6==2 {print $0}'  ./hogehoge.txt)

のように、戻り値を変数に取り込みたいのですが・・・シェル変数の展開で失敗している模様。
シェル変数には、日付文字列が入っています。

どのように書けば実現できるのでしょうか？

■追加情報
 awk -F "," 'BEGIN{OFS=","} $2=="'"2020/04/15 14:14:02"'" && $6==2 {print $0}' ./hogehoge.txt

このコマンドは通るようです。。。単純に展開されるだけではない？？

さらにさらに、コマンドプロンプトで以下の順に実行すると通った。。。
$ kdate="2020/06/14"
$ awk -F "," 'BEGIN{OFS=","} $2=="'"${kdate}"'" && $6==2 {print $0}' ./hogehoge.txt

どうしてスクリプトファイルに書いたら動かない？？？のかますますわからなくなってしまいました。

bashスクリプト内のawkにシェル変数を埋めたい

awkコマンドを用い、csvの中から重複した行を除外し、重複した件数が何件存在しているか確認できるコマンドはありますでしょうか？

例
sample.csv
以下の項目が存在
aaa
aaa
bbb
bac

上記の項目の中より、重複項目を除外し、且つ重複していた数を出力したいです

awkで重複行の削除及びカウントを実施したい

### 前提
シェルスクリプトでCSVファイルを読み込み、awkコマンドで各フィールドを出力したいのですがうまくいきません。
上記についてアドバイスをいただきたく、お手数をおかけしますがよろしくお願いします。

**○読み込むCSVファイルの形式**
対象のファイルは,で区切られていますが各フィールドの要素は"で囲われています。
"データ①","データ②","データ③","データ④"

### 発生している問題・エラーメッセージ
一部のデータに「,」含まれている場合があり、
そのようなデータを処理した場合にデータの出力がずれてしまいます。

### 実現したいこと
データの中に「,」が含まれてしまうことは避けれないので、
awkで「",」を区切り文字としてデータを分割したいと考えております。

### 該当のソースコード

```シェルスクリプト
#!/bin/bash

for file in `\find ./log/ -name '*.csv'`; do
	cat $file | awk 'BEGIN{FS="","}{print $1,$4}'  >> Output.csv
	#以下の書き方でもうまくいきませんでした。
	#cat $file | awk -F '",' -v OFS=","  ' {print $1,$4}'  >> Output.csv
done
```

以上です。よろしくお願いします。