Bigqueryのテーブルをmysqlのデータベースに移行したい

Question

前提・実現したいこと

bigqueryのテーブルをmysqlのデータベース上に移行させたい｡

発生している問題・エラーメッセージ

mysqlからBQへデータを移行している記事や､CloudSQLを使用する記事は見つかるのですが､
BQからmysqlへの以降方法は出てきませんでした｡

どのような手順で移行すれば良いでしょうか｡

なお､GCS経由でcsvファイルをローカルに落として来るやり方だと､データ量が大きく､エンコードができないです｡

試したこと

BigqueryのテーブルをcsvでGCSに流してローカルからのインポートを行う｡
→テーブルが大きく､エンコードの問題があり､インポートできず

Comments

[sazi]

データ量が多いというCSVのファイルサイズはどの位ですか？
また、そのCSVをどのようにインポートしていますか？

[haji3]

csvインポートだと全部varcharになってしまうと思いましたので､事前にからのテーブルを作成し､
カラムの定義を行っておりました｡
そこにcsvのテーブルをインポートするためにworkbench経由でインポートを実施しようとしたところ､エンコードができていないというエラーが出ました｡
Unhandled exception: 'ascii' codec can't decode byte 0x8b in position 1: ordinal not in range(128)

[sazi]

エンコードできない事はファイルサイズが大きい事とは関係がありませんよ。
「どのようにしてインポートしていますか？」とはコマンドだったり、その方法は何か？という事です。
まさか、CSVをコピペとかではないですよね？

[haji3]

workbench経由でインポート

Answer 1

エンコードできない事はファイルサイズが大きい事とは関係がありません。

概ね以下のような手順になるでしょう。
①MySQlでテーブルを作成。
②BigQUERYからCSVをダウンロード
※CSVは最大で1Gまでで、1Gを超える場合は複数ファイルに出力
1 つまたは複数のファイルへのデータのエクスポート
③MySQLへCSVをインポート
インポートは、LOAD DATA INFILEを使うと良いでしょう。

別にこの手順がすべてという訳ではありませんので、実際の手順を上記のように明記してもらうとアドバイスはしやすくなります。
※特にエンコードをどのようにしているか。