質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

新規登録して質問してみよう
ただいま回答率
85.50%
CSV

CSV(Comma-Separated Values)はコンマで区切られた明白なテキスト値のリストです。もしくは、そのフォーマットでひとつ以上のリストを含むファイルを指します。

MySQL

MySQL(マイエスキューエル)は、TCX DataKonsultAB社などが開発するRDBMS(リレーショナルデータベースの管理システム)です。世界で最も人気の高いシステムで、オープンソースで開発されています。MySQLデータベースサーバは、高速性と信頼性があり、Linux、UNIX、Windowsなどの複数のプラットフォームで動作することができます。

Q&A

解決済

3回答

3274閲覧

MySQLにCSVをインポートする際のベストプラクティス

fukazume

総合スコア78

CSV

CSV(Comma-Separated Values)はコンマで区切られた明白なテキスト値のリストです。もしくは、そのフォーマットでひとつ以上のリストを含むファイルを指します。

MySQL

MySQL(マイエスキューエル)は、TCX DataKonsultAB社などが開発するRDBMS(リレーショナルデータベースの管理システム)です。世界で最も人気の高いシステムで、オープンソースで開発されています。MySQLデータベースサーバは、高速性と信頼性があり、Linux、UNIX、Windowsなどの複数のプラットフォームで動作することができます。

0グッド

0クリップ

投稿2020/07/16 01:54

編集2020/07/16 01:57

###(はじめに)
抽象的な質問で申し訳ございません。
もっと具体的説明が必要な点などございましたら、適宜補足いたしますのでよろしくお願いいたします。

##■質問

CSVのwiki には、

CSV形式の細部の実装はソフトウェアによって異なるため(例えば項目を単一引用符' 'や二重引用符" "で括ったり、ファイルの一行目をヘッダとして予約したりなど)、他のソフトウェアで表(テーブル)として読み込む際に互換性で問題が出る場合がある

とありますが、

  • CSVファイルを生成する際、またはMySQLにCSVをLOAD DATA文でインポートする際のベストプラクティスなどはありますでしょうか?
  • シングルクォーテーション、ダブルクォーテーションによる括りの有無で長所短所などはありますでしょうか?
  • そもそも括り記号はどういったケースで有用でしょうか?

##■現状

"数値型データ", "日付型データ", "文字列型データ", みたいな構造でとりあえず、ダブルクォーテーションで括ってCSVデータを生成しLOAD DATA文でMySQLにインポートしていますが、そもそもこれら括り記号は不要なのではないかな?と思い始めています。

どうぞよろしくお願い申し上げます。

気になる質問をクリップする

クリップした質問は、後からいつでもMYページで確認できます。

またクリップした質問に回答があった際、通知やメールを受け取ることができます。

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

guest

回答3

0

ベストアンサー

・CSVファイルを生成する際、またはMySQLにCSVをLOAD DATA文でインポートする際のベストプラクティスなどはありますでしょうか?

#ベストプラクティスかどうかは別として注意点。
・タブや改行の扱い
GUIではタブは項目間の移動に使用される事が多く、単項目の入力でキーボードの入力によりタブが含まれる事は無いが、コピー&ペーストでは含まれるので考慮は必要。
項目内の改行はある事を前提にした方が良い。

・Nullの扱い
LOAD DATAではNull文字の指定は可能ですが、一旦全て文字列属性の一時テーブルで受け取ってから処理する方が楽。
データの取込が外部とのインターフェースなどが目的なら、チェック目的としても使用できますので。

・シングルクォーテーション、ダブルクォーテーションによる括りの有無で長所短所などはありますでしょうか?
・そもそも括り記号はどういったケースで有用でしょうか?

CSVやTSVで使用される制御コード(項目区切り,行区切り)=(,や改行)と同じコードが項目内に含まれるときの為に、括り記号は必須と考えた方が無難です。

投稿2020/07/16 02:25

編集2020/07/16 02:30
sazi

総合スコア25138

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

fukazume

2020/07/16 06:01 編集

「括り記号は必須と考えた方が無難です。」、このお言葉により自分の中で進むべき道が決まった気がします(大げさ)。なるべく括り記号を付ける方針で参りたいと思うのですが、その場合、極端な話として以下のレコードのようにシングル/ダブルの併用や有無の混在すると、CSVやMySQLの指針から逸脱しますでしょうか? 例:数値型データ, '日付型データ', "文字列型データ",
sazi

2020/07/16 06:26

括り記号として混在は駄目です。ENCLOSED BYで指定できるキャラクターは一つです。 OPTIONALLYを付けると文字型のみ付加されます。
fukazume

2020/07/16 06:55

おっしゃるとおりでした。CSVの事ばかり考えてうっかりしておりました。ありがとうございます!
guest

0

そもそも括り記号はどういったケースで有用でしょうか?

データ内にカンマが入る場合、何らかの形でデータ区切りとしてのカンマと識別できる必要があります。

投稿2020/07/16 01:58

maisumakun

総合スコア145121

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

fukazume

2020/07/16 05:54

テキストを扱う事が多いならタブ区切りのほうが一番リスクが低そうですね。ご回答いただきありがとうございます!
guest

0

  • 文字列のエンクロージャにダブルクォート
  • ダブルクォートを文字として扱うには文字を重ねる
  • データ区切りにカンマ
  • レコード区切りに改行マーク

※一部調整

投稿2020/07/16 01:58

編集2020/07/16 02:10
yambejp

総合スコア114572

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

yambejp

2020/07/16 02:00

これを守らないときはそれなりのトラブルが想定されるということです トラブルを自己解決できるならいろんな省略は可能です
fukazume

2020/07/16 05:53

ご回答いただきありがとうございます!
guest

あなたの回答

tips

太字

斜体

打ち消し線

見出し

引用テキストの挿入

コードの挿入

リンクの挿入

リストの挿入

番号リストの挿入

表の挿入

水平線の挿入

プレビュー

15分調べてもわからないことは
teratailで質問しよう!

ただいまの回答率
85.50%

質問をまとめることで
思考を整理して素早く解決

テンプレート機能で
簡単に質問をまとめる

質問する

関連した質問