質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

新規登録して質問してみよう
ただいま回答率
85.48%
INSERT

INSERTとは、行を追加する、コンピュータのデータベース言語SQLにおけるデータ操作言語(DML)ステートメントの1つである

CakePHP

CakePHPは、PHPで書かれたWebアプリケーション開発用のフレームワークです。 Ruby on Railsの考え方を多く取り入れており、Railsの高速性とPHPの機動性を兼ね備えています。 MVCやORMなどを「規約優先の考え方」で利用するため、コードを書く手間を省くことができます。 外部のライブラリに依存しないので、単体での利用が可能です。

Q&A

解決済

1回答

4708閲覧

cakePHP3での大量データのinsert処理について

youji999

総合スコア9

INSERT

INSERTとは、行を追加する、コンピュータのデータベース言語SQLにおけるデータ操作言語(DML)ステートメントの1つである

CakePHP

CakePHPは、PHPで書かれたWebアプリケーション開発用のフレームワークです。 Ruby on Railsの考え方を多く取り入れており、Railsの高速性とPHPの機動性を兼ね備えています。 MVCやORMなどを「規約優先の考え方」で利用するため、コードを書く手間を省くことができます。 外部のライブラリに依存しないので、単体での利用が可能です。

0グッド

1クリップ

投稿2018/06/25 07:52

編集2018/06/25 07:54

前提・実現したいこと

cakephp3で5000レコードあるCSVデータのインサート処理を行いたいのですが、3000件まではなんとかインサートされるのですが、それを超えると、ブラウザの処理が止まってしまい処理が終了しない形になります。30秒以上たっても応答がないです。

ちなみに、同じレコード数でinsert文を作って、phpmyadminでインサートすると、3秒ほどで登録が完了します。

発生している問題・エラーメッセージ

ブラウザがタイムアウトして、「このページは動作しません」という形になり、ブラウザの処理がストップする。 当然データは登録されてないです。

該当のソースコード

$articles = TableRegistry::get('Articles'); // 保存するデータ(5千件) $data = [ [ 'title' => 'First post', 'published' => 1 ], [ 'title' => 'Second post', 'published' => 1 ], (5千件) ]; //$dataは実際はループで作成 // 実行クエリ $query = $articles->query(); $query->insert(['title', 'published']); // dataの数だけvalues追加 foreach ($data as $d) { $query->values($d); } // 実行 $query->execute();

上記ソースは、https://qiita.com/KeijiYONEDA/items/8c2f0e2a8f9cfbf08eeb
を参考にしてますが、他に何か設定等必要ないのでしょうか。

どなたかご存知の方がいらっしゃいましたら、ご教授いただけないでしょうか。

もしくは上記やり方でなくてもいいので、処理スピード早い方法を教えていただければ助かります。

以上ですが、よろしくお願いいたします。

気になる質問をクリップする

クリップした質問は、後からいつでもMYページで確認できます。

またクリップした質問に回答があった際、通知やメールを受け取ることができます。

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

m.ts10806

2018/06/25 07:57

同じSQLを試したわけではないんですか?
youji999

2018/06/25 08:05

自己解決してしましました。お返事ありがとうございました。
m.ts10806

2018/06/25 08:09

了解です。ログ出力はなんだかんだでオーバーヘッドかかりますよね。解決したようで何よりです。
guest

回答1

0

自己解決

とりあえず、自己解決しました。実はログを吐き出す処理を以下のように記述しておりましたが、
これをコメントアウトすると、処理が数秒でおわりました。
$connection->logQueries(true);

ログの書き出しにどうも時間がかかっていたようです。

投稿2018/06/25 08:04

youji999

総合スコア9

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

あなたの回答

tips

太字

斜体

打ち消し線

見出し

引用テキストの挿入

コードの挿入

リンクの挿入

リストの挿入

番号リストの挿入

表の挿入

水平線の挿入

プレビュー

15分調べてもわからないことは
teratailで質問しよう!

ただいまの回答率
85.48%

質問をまとめることで
思考を整理して素早く解決

テンプレート機能で
簡単に質問をまとめる

質問する

関連した質問