UTF-8のcsvをShift-JISでDataTableに読み込み、MySQLにInsertする際の文字化けについて

Question

vb.netにて以下のプログラムを作成しました。

１．DataTableに出力データを作成する
２．文字コードUTF-8指定でcsvを出力する
３．文字コードShift-JIS指定で１のCSVをDataTableに読み込む
４．MySQL(UTF-8で設定済み)のTableにInsertを行う

文字コードの違いからDataTableに読み庫込んだ際に文字化けを起こすと思っていましたが
MySQLにInsertされたデータを確認したところ、文字化けを起こさずに読み込めていました。
現在は同じプログラムを使用すると文字化けを起こし４のInsert時にエラーが発生します。

csvの中身としては英字・数字・漢字・ひらがな・漢字・〒の記号が含まれます。
(主な内容としては通販の商品名や送り先の住所になります。)

どこがどのように動作しているかを確認中ですが、文字コードが違っていても
文字化けを起こさずに処理が行えるケースというのもありえるのでしょうか？

Answer 1

異なる文字コードのファイルをやり取りすること自体が良くないことなので
明示的に同じ文字コードを指定することで回避する

Answer 2

一般的にいえば、文字コードの指定が異なると文字化けを起こします。今回の例では下記を確認すると文字化けしない原因がわかるのではないでしょうか？

• 2. 文字コードShift-JIS指定でcsvを出力する でShift-JISで出力できているか
• 3. 文字コードUTF-8指定で１のCSVをDataTableに読み込むで、読み込んだ文字列が文字化けしていないか？→文字化けしないのであれば、自動でShift-JIS→UTF-8変換が行われている？

VB.netには詳しくないので、「自動でShift-JIS→UTF-8変換が行われる」事があるかどうかはわかりません。ごめんなさい。

Comments

[yui_sarasina]

ご回答ありがとうございます。
記載した質問文のShift-JISとUTF-8が逆になってしまっていたので修正しました。

２で出力したCSVは指定した文字コードになっておりました。
(Shift-JISとUTF-8でそれぞれ出力してさくらエディタで確認)
３については現在は文字化けを起こしておりますが、
同じプログラムで以前は文字化けしていなかったと思われます。
未検証ですがプログラムの構造上、文字化けを起こしていると
MySQLへのInsertでエラーが起きる可能性が高いのと(数量やNuLL非許可がある為)
Insertされた過去のデータをみると文字化けせずに登録されています。

自動で変換されたりも含めて調べてみます。

[TakayasuNakane]

MySQL 自体のバージョンは変わっていませんか？

[yui_sarasina]

MySQLのバージョンは開発や稼働環境など全て同一のものを使用しています。

直接の原因は特定できていませんが、
Shift-JISのcsvをUTF-8で読み込む動作自体が良くないことですし
vb.netやMySQLで自動的に何か行われているとした場合も
バージョン互換などで動作の保証が難しい為、
明示的に同じ文字コードを指定する形にします。