質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

新規登録して質問してみよう
ただいま回答率
85.50%
PHP

PHPは、Webサイト構築に特化して開発されたプログラミング言語です。大きな特徴のひとつは、HTMLに直接プログラムを埋め込むことができるという点です。PHPを用いることで、HTMLを動的コンテンツとして出力できます。HTMLがそのままブラウザに表示されるのに対し、PHPプログラムはサーバ側で実行された結果がブラウザに表示されるため、PHPスクリプトは「サーバサイドスクリプト」と呼ばれています。

CakePHP

CakePHPは、PHPで書かれたWebアプリケーション開発用のフレームワークです。 Ruby on Railsの考え方を多く取り入れており、Railsの高速性とPHPの機動性を兼ね備えています。 MVCやORMなどを「規約優先の考え方」で利用するため、コードを書く手間を省くことができます。 外部のライブラリに依存しないので、単体での利用が可能です。

Q&A

解決済

2回答

17295閲覧

PHP CSVダウンロード時のメモリ不足

seagal18

総合スコア32

PHP

PHPは、Webサイト構築に特化して開発されたプログラミング言語です。大きな特徴のひとつは、HTMLに直接プログラムを埋め込むことができるという点です。PHPを用いることで、HTMLを動的コンテンツとして出力できます。HTMLがそのままブラウザに表示されるのに対し、PHPプログラムはサーバ側で実行された結果がブラウザに表示されるため、PHPスクリプトは「サーバサイドスクリプト」と呼ばれています。

CakePHP

CakePHPは、PHPで書かれたWebアプリケーション開発用のフレームワークです。 Ruby on Railsの考え方を多く取り入れており、Railsの高速性とPHPの機動性を兼ね備えています。 MVCやORMなどを「規約優先の考え方」で利用するため、コードを書く手間を省くことができます。 外部のライブラリに依存しないので、単体での利用が可能です。

4グッド

3クリップ

投稿2015/12/04 02:36

編集2015/12/04 06:53

PHP(CakePHP)で検索した結果をCSVダウンロードをしたいのですが、件数が多い場合メモリ不足になってしまいます。

メモリ不足と判断した理由ですが、

  • CakePHPのエラー画面でメモリ不足と表示される
  • 数千件のデータなら問題ないが、数万件だと落ちる
  • PHP.iniのmemory_limitを増やすと処理できるようになる

という点から判断しました。

エラーメッセージによると以下のコードのstr_replace()の部分でメモリが足りなくなっているようです。

memory_limitを増やすという対処法は難しいので、メモリ消費を減らす、適宜解放を行うなどの方法で実現したいと考えていますが、うまくコードが書けません。アドバイス等ありましたらお願い致します。

PHP

1public function export($results){ 2 $fp = fopen('php://temp', 'r+b'); 3 4 // 検索結果を書き込む 5 foreach ($results as $data) { 6 fputcsv($fp, $data); 7 } 8 9 rewind($fp); 10 $tmp = str_replace(PHP_EOL, "\r\n", stream_get_contents($fp)); 11 12 header("Content-Type: application/octet-stream"); 13 header("Content-Disposition: attachment; filename=".$this->filename); 14 echo mb_convert_encoding($tmp, 'SJIS-win', 'UTF-8'); 15 16 exit; 17}

解決できましたので、実装を追記しておきます。

修正したメソッド

PHP

1public function export($results){ 2 // フィルタを登録 3 stream_filter_register("eolFilter", "eol_filter"); 4 stream_filter_register("encodeFilter", "encode_filter"); 5 6 $fp = fopen('php://output', 'w'); 7 8 // フィルタを開いたストリームに付加する 9 stream_filter_append($fp, "eolFilter"); 10 stream_filter_append($fp, "encodeFilter"); 11 12 // ダウンロードさせる 13 header("Content-Type: application/octet-stream"); 14 header("Content-Disposition: attachment; filename=".$this->filename); 15 16 // 検索結果を書き込む 17 foreach ($results as $data) { 18 fputcsv($fp, $data); 19 } 20 21 fclose($fp); 22}

作成したフィルタクラス

PHP

1// 改行コードをPHP_EOLからCR+LFに置換するフィルタ 2class eol_filter extends php_user_filter { 3 function filter($in, $out, &$consumed, $closing) { 4 while ($bucket = stream_bucket_make_writeable($in)) { 5 $bucket->data = str_replace(PHP_EOL, "\r\n", $bucket->data); 6 $consumed += $bucket->datalen; 7 stream_bucket_append($out, $bucket); 8 } 9 return PSFS_PASS_ON; 10 } 11} 12 13// 文字コードをUTF-8からShift-JISに置換するフィルタ 14class encode_filter extends php_user_filter { 15 function filter($in, $out, &$consumed, $closing) { 16 while ($bucket = stream_bucket_make_writeable($in)) { 17 $bucket->data = mb_convert_encoding($bucket->data, 'SJIS-win', 'UTF-8'); 18 $consumed += $bucket->datalen; 19 stream_bucket_append($out, $bucket); 20 } 21 return PSFS_PASS_ON; 22 } 23}

参考ページ

hirai0110, KiyoshiMotoki, ikuwow👍を押しています

気になる質問をクリップする

クリップした質問は、後からいつでもMYページで確認できます。

またクリップした質問に回答があった際、通知やメールを受け取ることができます。

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

guest

回答2

0

ベストアンサー

メモリ不足に関しては以下の方策で対応できるかと
一括処理を行っているのでメモリが大量に必要なのです

  1. php://tempphp://output に変える
  2. stream_filter_append で 登録した function を用いて mb_convert_encoding や 改行文字変換を行う

投稿2015/12/04 03:03

退会済みユーザー

退会済みユーザー

総合スコア0

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

seagal18

2015/12/04 04:54

教えていただいた方法で解決しました! ストリームフィルタという機能自体を知らなかったので勉強になりました。 ありがとうございました。
guest

0

未検証ですが、参考になりそうな記事のみ紹介させていただきます。

http://d.hatena.ne.jp/omoon/20110527/1306475827

投稿2015/12/04 04:20

編集2015/12/04 04:21
KiyoshiMotoki

総合スコア4791

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

seagal18

2015/12/04 04:55

ストリームフィルタの調査中、丁度こちらのページに辿り着いて参考にさせてもらっていた所でした。 情報ありがとうございました。
guest

あなたの回答

tips

太字

斜体

打ち消し線

見出し

引用テキストの挿入

コードの挿入

リンクの挿入

リストの挿入

番号リストの挿入

表の挿入

水平線の挿入

プレビュー

15分調べてもわからないことは
teratailで質問しよう!

ただいまの回答率
85.50%

質問をまとめることで
思考を整理して素早く解決

テンプレート機能で
簡単に質問をまとめる

質問する

関連した質問