常連

# やりたいこと
192.168.100.1 の ポート 10080 で Webサーバーが動いています。
192.168.100.1/chat というパスに向けて POST したいです。

```bash
curl -X POST 'http://192.168.100.123/chat' --port 10080 -d "fuga=hoge"
```

イメージとしてはこのような感じです。
＊上記は curl に --port というのがないため失敗します。


# やったこと
```bash
curl -X POST 'http://192.168.100.123:10080/chat' -d "fuga=hoge"
```
ポートを`：`でくっつけて試したのですが、うまくいきませんでした。

# 知りたいこと
curl で port 指定で特定のパスに対して post させることは可能か知りたいです。
ご存知の方いらっしゃいましたらご教示いただけませんでしょうか？

curl で port 指定で post できますか？

### 実現したいこと

バックアップシェルで、ディレクトリごと圧縮しつつ、シンボリックリンクは除外したい

### 前提

ここに質問の内容を詳しく書いてください。
（例）
現在バックアップするシェルを作成していますが、うまくいきません。。

### 発生している問題・エラーメッセージ

フォルダごとtarで固めるとシンボリックリンクも含まれてしまいました。
nice -19 tar zcvpf test.tar.gz

現状は以下のコードで、シンボリックリンクを除いたリストを作成して、それに基づいてtarコマンドで圧縮しています。
find {リストにするディレクトリ} -mindepth 1 -type f > list.txt
nice -19 tar zcvpf {圧縮先パス} --files-form=list.txt
-type f でシンボリックリンクを除外して、-mindepth 1はサブフォルダがある場合に親ディレクトリとサブディレクトリで
重複して圧縮しないために使用しています。
この状態だと、シンボリックリンクを含まないで圧縮ができるのですが、唯一からのフォルダがあった場合無視されてしまいます。
type oも追加で使用することでフォルダが空の場合でも圧縮できたのですが、その場合以下のディレクトリをリストにした際、
フォルダが被ってしまいます。
src/hoge/hoge2　↓

src
hoge/hoge2
hoge2/
このように親ディレクトリ含めてしまうので重複してしまいます。
-mindepthも使用してあれこれ試してみたのですが、理想的な状態にはできませんでした。

最終的には、シンボリックリンクを除いた、すべての構造をそのままバックアップしたいです。

つたない質問で申し訳ないのですが、ご教授いただければ幸いです。
### 該当のソースコード

```ここに言語名を入力
ソースコード
```

### 試したこと

ここに問題に対して試したことを記載してください。

### 補足情報（FW/ツールのバージョンなど）

ここにより詳細な情報を記載してください。


バックアップシェルで、ディレクトリごと圧縮しつつ、シンボリックリンクは除外したい

### 実現したいこと
データマスキングのため、oracleDBサーバ（OS：Linux）で大量のupdate文（600文以上）を実行したいです。

### 発生している問題・分からないこと
データマスキングのため、oracleDBサーバ（OS：Linux）で大量のupdate文（600文以上）を実行したいです。
teraterm上で一定数ずつコピペして実行したところ、一度に実行する数が多すぎると、どこまで完了したかの把握がしづらかったです。
そこで、シェルスクリプト内でupdate文をまとめて実行する方法を検討していて、実行中も経過観察ができる（実行update文と実行結果が表示される）ようにしたいです。ご教示いただけますと幸いです。
別のより良い方法があれば、そちらをご教示いただきたいです。よろしくお願いします。



### 該当のソースコード

```
特になし
```

### 試したこと・調べたこと
- [x] teratailやGoogle等で検索した
- [ ] ソースコードを自分なりに変更した
- [ ] 知人に聞いた
- [ ] その他

##### 上記の詳細・結果
googleで「シェルスクリプト　sql大量実行」と検索しましたが、欲しい情報は見つかりませんでした。

### 補足
特になし

oracleDBサーバ（OS：Linux）で大量のupdate文（600文以上）を実行したい

表題の通り、「sh」と「bash」の違いがいまいち理解しておりません。

シェルを書くときに、冒頭に下記のようなおまじないを記述するかと思います。
```
#!/bin/sh
```
```
#!/bin/bash
```


仕事上、シェルはよく書くのですが、
今まで「sh」と「bash」を意識して書いたことがありませんでした。

どちらでシェルを書いたほうがよろしいでしょうか？
メリットデメリットなどを教えてください。

また、皆さんの使い分けなども教えてください。
例）このケースだとbashを使うなど。。

よろしくお願いしますm(＿ ＿)m

「sh」と「bash」の使い分け

### 実現したいこと
ファイル名が一行ずつ記載されているCSVファイルを用意し、
そこから一行ずつ読み込んで、記載されているファイル名の中身を表示させるシェルスクリプトを作成したいです。

シェルスクリプトも初心者で、teratailでの質問も初めてのため、
わかりづらい質問で申し訳ありません。

### 発生している問題・分からないこと
以下のようにスクリプトを書いたのですが、



### 該当のソースコード

```ShellScript
#!/bin/zsh

while read row; do
  
  file=`echo ${row} | tr -d "\r"`
  find "**/${file}"

done < FileName.csv
```

### 試したこと・調べたこと
- [x] teratailやGoogle等で検索した
- [x] ソースコードを自分なりに変更した
- [ ] 知人に聞いた
- [ ] その他

##### 上記の詳細・結果
全行について
find: **/[ファイル名]: No such file or directory
が返ってきてしまいます。

CSVファイルFileName.csvの内容は、一行ずつファイル名が記載されているような内容です。

最終的には、findではなくcatで、ファイルの中身を一行ずつCSVに書き込みたいと考えています。
（まだ試していないので具体的な質問ができないのですが、
ファイルの中身に改行があると、CSVファイルに書き込む際にも改行されてしまいそうですね。
1つのファイルの中身は一行にまとめたいのですが…）

### 補足
特になし

CSVファイルから一行ずつ読み込んだ文字列を元にfindやcatを実行するシェルスクリプトを作成したい

### 実現したいこと

大元のファイルのカンマ区切りの先頭が、
比較対象のファイル内の行と一致する行を、**除外**したいです。

**▼データのイメージ**

大元のファイル：`src.txt`

```
10,0
9,0
8,0
7,0
6,0
5,0
4,0
3,0
2,0
1,0
```

比較対象のファイル：`dst.txt`

```
1
2
3
4
5
```

**▼期待される出力結果**

`src.txt`のうち、「`5,0`」~「`1,0`」の5行が
除外されたテキストが、出力される。

最終的な出力結果は、ソートされていなくてもOKなものとする。

```
10,0
6,0
7,0
8,0
9,0
```

### 前提

`src.txt`側が数百万行単位の大規模データとなっても、
実行時間を短縮できるように、なるべくパフォーマンスを重視したいです。

PythonやPHP等のスクリプト言語で、
配列ループ・配列の要素判定をする方式であれば、
比較的容易に実現可能ではありますが、実行速度に難がある状態です。

また、古いシステムでも利用できるように、
可能な限りbashやperl辺りで完結させたいと考えております。

### 試したこと

commコマンド、cutコマンドを組み合わせるやり方では、
`src.txt`側に元々入っている付属情報が抜け落ちてしまっています。
（最終的には、`,0`の部分まで、該当の行全体が出力されるようにしたい）

```bash
$ comm -23 <(sort src.txt | cut -f 1 -d ',') <(sort dst.txt)
10
6
7
8
9
```

### 補足情報（FW/ツールのバージョンなど）

* CentOS 6.6
* bash 4.1.2
* perl 5.10.1
* Python 2.6.6

2ファイル間で、カンマ区切りの範囲で一致する行を、除外するには

### 前提・実現したいこと
●前提
実装で、「シェルスクリプトで内でcurlし、ステータスコードとレスポンスボディの2つから分岐させる処理」を書いています。
1回のcurlで、ステータスコードとレスポンスボディの2つのみを取得したいのですが、できません。

●できないこと（実現したいこと）
「curlレスポンスにて、ステータスコードとレスポンスボディの2つを取得する」

●できたこと
「ステータスコードのみ取得する」
「レスポンスボディのみ取得する」
「ステータスコード・ヘッダー・レスポンスボディのすべて取得する」

curlコマンドのオプションで実現可能だと一番うれしいのですが、よいオプションや方法がみつけられませんでした。
よい指定方法をご存じの方、ご教示いただけませんでしょうか？

### 試したこと

1.status_codeのみを取得
```
$ curl -LI google.com -o /dev/null -w '%{http_code}\n' -s
200
```


2.bodyのみを取得
```
$ curl google.com
<HTML><HEAD><meta http-equiv="content-type" content="text/html;charset=utf-8">
<TITLE>301 Moved</TITLE></HEAD><BODY>
<H1>301 Moved</H1>
The document has moved
<A HREF="http://www.google.com/">here</A>.
</BODY></HTML>
```

3.status_codeとbodyの両方を取得（ヘッダーも入ってしまう）
```
$ curl -Ssi google.com
HTTP/1.1 301 Moved Permanently
Location: http://www.google.com/
Content-Type: text/html; charset=UTF-8
Date: Thu, 16 Jan 2020 03:28:27 GMT
Expires: Sat, 15 Feb 2020 03:28:27 GMT
Cache-Control: public, max-age=2592000
Server: gws
Content-Length: 219
X-XSS-Protection: 0
X-Frame-Options: SAMEORIGIN

<HTML><HEAD><meta http-equiv="content-type" content="text/html;charset=utf-8">
<TITLE>301 Moved</TITLE></HEAD><BODY>
<H1>301 Moved</H1>
The document has moved
<A HREF="http://www.google.com/">here</A>.
</BODY></HTML>
```

取得後、("200","body")のように、リストやタプルのような感じで使用したいイメージです。

curlコマンドのオプションで実現可能だと一番うれしいのですが、よいオプションや方法がみつけられませんでした。
curlにお詳しい方、よい指定方法をご存じの方、知恵をかしていただけませんでしょうか？
よろしくおねがいします。

### 補足情報（FW/ツールのバージョンなど）
CentOS7

curlのレスポンスで、status_codeとbodyのみを取得したい

# やりたいこと
lists.js と cats.js の二つのファイルを加工して、data1.txt と data2.txt にしてから、二つのファイルをデータベースの外部結合風に結合したい。
lists.js => data1.txt
cats.js => data2.txt
data1.txt
```
1,問い合わせ1,回答1
2,問い合わせ2,回答2
3,問い合わせ3,回答3
4,問い合わせ4,回答4
5,問い合わせ5,回答5
```
data2.txt
```
1,カテゴリー3
2,カテゴリー1
3,カテゴリー1
5,カテゴリー4
```
`join` コマンドで結合。
```bash
$ join -t, -a1 -o auto -eNULL data1.txt data2.txt
1,問い合わせ1,回答1,カテゴリー3
2,問い合わせ2,回答2,カテゴリー1
3,問い合わせ3,回答3,カテゴリー1
4,問い合わせ4,回答4,NULL
5,問い合わせ5,回答5,カテゴリー4
```
lists.js
```js
const data = {
  "lists" : [ {
    "a" : "回答1",
    "id" : "1",
    "q" : "問い合わせ1"
  }, {
    "a" : "回答2",
    "id" : "2",
    "q" : "問い合わせ2"
  }, {
    "a" : "回答3",
    "id" : "3",
    "q" : "問い合わせ3"
  }, {
    "a" : "回答4",
    "id" : "4",
    "q" : "問い合わせ4"
  }, {
    "a" : "回答5",
    "id" : "5",
    "q" : "問い合わせ5"
  }]
}
```
lists.js => data1.txt
test.sh
```bash
#!/usr/bin/env bash
sed -E '1,2d; s/(^[ \t]*|[ \t]*$)//g' lists.js |
sed -z 's/}]\n}//' |
awk -F, 'BEGIN{RS="}, {"} {
  for(i=1; i<=3; i++) {
    split($i,array,"\"")
    $i=array[4]
  }
  print $2 "," $3 "," $1
}'
echo ${PIPESTATUS[@]}    #パイプエラー確認
```
最初と最後の二行を削除、行頭と行末のスペースを削除してから、`row` を改行ではなく、`}, {` で区切ってグループ化しています。列の区切りは、`,` です。
結果、
```
1,問い合わせ1,回答1
2,問い合わせ2,回答2
3,問い合わせ3,回答3
4,問い合わせ4,回答4
5,問い合わせ5,回答5
0 0 0
```
cats.js
```js
const data = {
  "categories" : [ {
    "c" : "カテゴリー1",
    "id" : "1",
    "lists_id" : "2 3"
  }, {
    "c" : "カテゴリー2",
    "id" : "2",
    "lists_id" : ""
  }, {
    "c" : "カテゴリー3",
    "id" : "3",
    "lists_id" : "1"
  }, {
    "c" : "カテゴリー4",
    "id" : "4",
    "lists_id" : "5"
  }]
}
```
cats.js => data2.txt
test2.sh
```bash
#!/usr/bin/env bash
sed -E '1,2d; s/(^[ \t]*|[ \t]*$)//g' cats.js |
sed -z 's/}]\n}//' |
awk -F, 'BEGIN{RS="}, {"} 
{
  for(i=1; i<=3; i++) {
    split($i,array,"\"" )
    $i=array[4]
  }
  split($3,array," ")
  for(i in array) {
    id_cat[array[i]]=$1
  }
  for(i in id_cat) {
    print i "," id_cat[i]
  }
  delete id_cat
}' | sort -t, -n
echo ${PIPESTATUS[@]}    #パイプエラー確認
```
結果、
```bash
1,カテゴリー3
2,カテゴリー1
3,カテゴリー1
5,カテゴリー4
0 0 0 0
```
こちらもうまくいっているようですが、もっとシンプルに書けるのではないかと疑問に思っています。間違いや修正点、別の方法があればご教示お願いいたします。