csvファイルをMySQLでインポートすると、データベースからダブルクォーテーション(")が抜ける

Question

phpMyAdminを使用して、csvファイルをインポートすると、データベースのデータの中身からダブルクォーテーション(")が抜けてしまいます。

環境は、以下のようになります。
クライアント環境：Windows11

サーバの種類： MariaDB
サーバのバージョン： 10.5.13-MariaDB-log - MariaDB Server
プロトコル バージョン: 10
サーバの文字セット: UTF-8 Unicode (utf8)
ウェブサーバ：Apache
データベースクライアントのバージョン： libmysql - 10.1.48-MariaDB

csvファイルのデータの中には、HTMLタグのリンクタグやイメージタグが入っているため、ダブルクォーテーションがないと、HTML表示時に、表示崩れを起こしてしまいます。

csvファイルのインポート時に、カラムの囲み記号とエスケープ記号にダブルクォーテーション(")を使用しているためと思われますが、他にどのような文字を当てればよいのか、思いつきません。

テーブル名：blog

※kiziカラムに注目してください。

<img src=xxx.jpg>と、あるようにダブルクォーテーション(")が抜けてしまっています。

csvファイルの中身を表示しています。
インポート前のファイルなのですが、
<img src="xxx.jpg">
と、ダブルクォーテーション(")がつけてあるのがわかるかと思います。

他の方法も思いつかない為、ぜひ方法がわかる方に教えていただきたいです。

Comments

[y_waiwai]

どういうデータがどういうふうになるのか提示しましょう

[snow2021]

わざわざすみません。
本文に提示します。

[hoshi-takanori]

csv として不正な気が…。その csv はどうやって作りましたか？ タブ区切りの方が良いのでは…。
https://obel.hatenablog.jp/entry/20170117/1484622333

[m.ts10806]

そのcsvはそもそもどのように作られたのでしょう

[snow2021]

回答をありがとうございます。

＞　csv として不正な気が…。その csv はどうやって作りましたか？ タブ区切りの方が良いのでは…。

csvとしては、カンマ区切りです。

＞　https://obel.hatenablog.jp/entry/20170117/1484622333

こちらを読みましたが、インポートではなくエクスポートはタブ区切りと明記してありますね。
インポートは、カンマ区切りでも良いはずだと思いましたが…。

[snow2021]

回答をありがとうございます。

＞　そのcsvはそもそもどのように作られたのでしょう

Perl(CGI)で出力されたテキストファイルです。
本文上にある、csvファイルは、テキストエディター「秀丸」で、「csvモード」という表示形式で表示していますので、不正なファイルではないと思います。

[hoshi-takanori]

その記事で読んで欲しかったのは以下の部分です。" がそのまま出力されてるようなので、csv としては不適切になります。
タブ区切りなら、このような処理は不要なはずなので、そちらをお勧めしました。

> フィールド中に「"」が含まれていた場合
> この場合は「"」を「""」にエスケープした上で、「引用記号」で囲む必要があります

[snow2021]

回答をありがとうございます。

> その記事で読んで欲しかったのは以下の部分です。" がそのまま出力されてるようなので、csv としては不適切になります。

確かに、その部分は読んでいませんでした。ご指摘通りです。すみません。

> フィールド中に「"」が含まれていた場合
> この場合は「"」を「""」にエスケープした上で、「引用記号」で囲む必要があります

「"」を「""」して、「引用記号」で囲んでみようと思います。

[snow2021]

追記。
> 「"」を「""」して、「引用記号」で囲んでみようと思います。

「"」を「""」にエスケープして、「引用記号」に「\」を用いたら、上手く「"」をデータベースにインポートすることができました。

ありがとうございました。

Answer 1

MariaDBからエクスポートする時を考えると、やはり「"」をデータの中に用いるのは、得策ではないと考えました。
ですから、以下のように、昔からあるエスケープ方法があるのを思い出したので、そちらに置換することにしました。

my $data_line = "";
my $user = 'snow';
my $id = '1';
my $line = "";
my ($t_bi, $ca_no, $title, $kizi, $k_bi, $iine );
foreach(@data_list){
    ($t_bi, $ca_no, $title, $kizi, $k_bi, $iine ) = split(',', $_);

    # HTMLタグを登録用に無効にする
    $title =~ s/&/&/g;
    $title =~ s/</&lt;/g;
    $title =~ s/>/&gt;/g;
    $title =~ s/"/&quot;/g;
    $title =~ s/'/&#39;/g;

    $kizi =~ s/&/&amp;/g;
    $kizi =~ s/</&lt;/g;
    $kizi =~ s/>/&gt;/g;
    $kizi =~ s/"/&quot;/g;
    $kizi =~ s/'/&#39;/g;

    $line = join(',', $id, $t_bi, $ca_no, $title, $kizi, $k_bi, $iine, $user);
    $data_line .= $line . "\n";
    $id++;
}

エディター「秀丸」で「csvモード」で表示しました。

データベースではこんな感じで、インポートできました。

ありがとうございました。