質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

新規登録して質問してみよう
ただいま回答率
85.50%
Django

DjangoはPythonで書かれた、オープンソースウェブアプリケーションのフレームワークです。複雑なデータベースを扱うウェブサイトを開発する際に必要な労力を減らす為にデザインされました。

Apache

Apacheは、Apache HTTP Serverの略で、最も人気の高いWebサーバソフトウェアの一つです。安定性が高いオープンソースソフトウェアとして商用サイトから自宅サーバまで、多くのプラットフォーム向けに開発・配布されています。サーバーソフトウェアの不具合(NCSA httpd)を修正するパッチ(a patch)を集積、一つ独立したソフトウェアとして開発されました。

Python 2.7

Python 2.7は2.xシリーズでは最後のメジャーバージョンです。Python3.1にある機能の多くが含まれています。

JavaScript

JavaScriptは、プログラミング言語のひとつです。ネットスケープコミュニケーションズで開発されました。 開発当初はLiveScriptと呼ばれていましたが、業務提携していたサン・マイクロシステムズが開発したJavaが脚光を浴びていたことから、JavaScriptと改名されました。 動きのあるWebページを作ることを目的に開発されたもので、主要なWebブラウザのほとんどに搭載されています。

HTML

HTMLとは、ウェブ上の文書を記述・作成するためのマークアップ言語のことです。文章の中に記述することで、文書の論理構造などを設定することができます。ハイパーリンクを設定できるハイパーテキストであり、画像・リスト・表などのデータファイルをリンクする情報に結びつけて情報を整理します。現在あるネットワーク上のほとんどのウェブページはHTMLで作成されています。

Q&A

解決済

2回答

2430閲覧

Djangoを使いブラウザから10MB程度のバイナリファイルをアップロードしたい。

mackerel6.023

総合スコア317

Django

DjangoはPythonで書かれた、オープンソースウェブアプリケーションのフレームワークです。複雑なデータベースを扱うウェブサイトを開発する際に必要な労力を減らす為にデザインされました。

Apache

Apacheは、Apache HTTP Serverの略で、最も人気の高いWebサーバソフトウェアの一つです。安定性が高いオープンソースソフトウェアとして商用サイトから自宅サーバまで、多くのプラットフォーム向けに開発・配布されています。サーバーソフトウェアの不具合(NCSA httpd)を修正するパッチ(a patch)を集積、一つ独立したソフトウェアとして開発されました。

Python 2.7

Python 2.7は2.xシリーズでは最後のメジャーバージョンです。Python3.1にある機能の多くが含まれています。

JavaScript

JavaScriptは、プログラミング言語のひとつです。ネットスケープコミュニケーションズで開発されました。 開発当初はLiveScriptと呼ばれていましたが、業務提携していたサン・マイクロシステムズが開発したJavaが脚光を浴びていたことから、JavaScriptと改名されました。 動きのあるWebページを作ることを目的に開発されたもので、主要なWebブラウザのほとんどに搭載されています。

HTML

HTMLとは、ウェブ上の文書を記述・作成するためのマークアップ言語のことです。文章の中に記述することで、文書の論理構造などを設定することができます。ハイパーリンクを設定できるハイパーテキストであり、画像・リスト・表などのデータファイルをリンクする情報に結びつけて情報を整理します。現在あるネットワーク上のほとんどのウェブページはHTMLで作成されています。

0グッド

0クリップ

投稿2019/02/19 13:21

編集2019/02/19 13:33

前提・実現したいこと

Djangoで作成したサイトでバイナリファイルをアップロードし、サーバ上に保存したい。

  • 環境情報

CentOS 6.7
Python2.7
Django1.7

発生している問題・エラーメッセージ

ファイルサイズ6MB程度までは正常にアップロードできるが、7MB以上になると以下のエラーが発生する。
※サイズは目安です。正確なしきい値は不明です。

UnreadablePostError: Apache/mod_wsgi request data read error: The timeout specified has expired.,

おおよそ20秒でエラーが発生していたので、メッセージどおりのタイムアウトを疑ったのですが、20秒という数値がタイムアウトとして思い当たる設定がないのと、6MB程度のファイルをアップロードしたときは22秒程度はかかって正常終了したことから、それ以外の要素がある可能性があります。

該当のソースコード

以下のフォームでファイルを選択します。

HTML

1<form id="upload_files_form" name="upload_files_form" action="/upload/" target="upload_dummy" method="POST" enctype="multipart/form-data"> 2 <input type="hidden" name="csrfmiddlewaretoken" value="0xKA93pAPKYZAU5dlV6jiP6bl14ThtHt"> 3 <label class="required">データファイルアップロード</label> 4 <input id="upload_files" name="files" type="file" multiple=""> 5</form>

onchangeイベントを付与してuploadします。

javascript

1 $(document).on("change", "#upload_files", function() { 2 // ファイル名は取得できないのでformにinput領域として追加する 3 var filenameElement = document.createElement('input'); 4 var filenames = ""; 5 for (var i = 0; i < document.getElementById('upload_files').files.length; i++ ) { 6 filenames += document.getElementById('upload_files').files[i].name + "/"; 7 } 8 filenameElement.setAttribute('value', filenames); 9 filenameElement.setAttribute('name','filenames'); 10 filenameElement.setAttribute('hidden',null); 11 document.forms.upload_files_form.appendChild(filenameElement); 12 13 // ファイルをアップロードする 14 var XHR = new XMLHttpRequest(); 15 var FD = new FormData(document.forms.upload_files_form); 16 XHR.open("POST", "/upload/"); 17 XHR.send(FD); 18 }); 19

Viewで受け取りファイルを出力します。

python

1@csrf_exempt 2def upload(request): 3 filenames_str = request.POST['filenames'].encode('utf-8') 4 files = request.FILES.getlist('files') 5 6 if (not (os.path.exists(UPLOAD_DIR_ROOT))): 7 os.mkdir(UPLOAD_DIR_ROOT) 8 9 filenames = filenames_str.split("/") 10 11 for i in range(0, len(files)): 12 filepath = os.path.join(UPLOAD_DIR_ROOT, filenames[i]) 13 file = open(filepath, "wb") 14 for chunk in files[i].chunks(): 15 file.write(chunk) 16 return HttpResponse("")

試したこと

Apacheのタイムアウト設定を確認し、明示的に300秒に設定。
DjangoのSettings.pyにファイルサイズの上限を100MBに設定。
設定のキーワードがググったところ2種類見つかったので、2つ設定。
MAX_UPLOAD_SIZE = 104857600
DATA_UPLOAD_MAX_MEMORY_SIZE = 104857600

ファイルサイズに関して調査して上記のとおりでした。
バイナリ、テキスト両方試しましたが違いはありませんでした。

補足情報(FW/ツールのバージョンなど)

CentOS 6.7
Python2.7
Django1.7

同じコードを以下の環境で実行したときは問題なく動作しました。
ubuntu server 16.04
Python 3.7
Django 2.1

気になる質問をクリップする

クリップした質問は、後からいつでもMYページで確認できます。

またクリップした質問に回答があった際、通知やメールを受け取ることができます。

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

guest

回答2

0

(ご解決済みだということを理解した上で投稿しています。問題が起こるサーバは使わないことに決めたのでこれ以上の調査は行わない、といったことであればスルーしてください。)

環境情報としては書かれていませんが、エラーメッセージによると、ウェブサーバと wsgi には Apache ・ mod_wsgi をお使いとのことですね。

Apache のタイムアウトでひっかかっていないとのことであれば、 mod_wsgi の方が怪しいのではないでしょうか。

mod_wsgi のドキュメントの WSGIDaemonProcess のページに次のような記述がありました。

connect-timeout=sss

Defines the maximum amount of time for an Apache child process to wait trying to get a successful connection to the mod_wsgi daemon processes. This defaults to 15 seconds.

この設定値等がどのようになっているのか、 mod_wsgi 周りのエラーログに何か出ていないか見られてみると状況把握が進むかもしれません。

投稿2019/04/26 04:52

編集2019/04/26 05:31
gh640

総合スコア1407

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

mackerel6.023

2019/04/26 06:07

コメントありがとうございます。 ご指摘の部分についても試してはみたのですが、変化がなかった次第です。 そもそもとして設定は維持したまま、別環境に移植しただけで(処理時間にかかわらず)改善されてしまったので、現時点ではハード起因とみています。※確認のしようがありませんが。
gh640

2019/04/26 06:12

ご返信いただきありがとうございます。 そうですか。ログ等にも何も出なかった、ということですかね。 不思議ですね・・・。そういうことがあるのですね。ご説明くださりありがとうございます :)
guest

0

自己解決

原因そのものは不明でしたが、さくらインターネットのさくらVPSで構築した環境だけで発生するとわかったので、ハードウェア起因の可能が高いと思われます。
ミドルウェア、コード内容に問題はありませんでした。

投稿2019/04/26 00:51

mackerel6.023

総合スコア317

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

あなたの回答

tips

太字

斜体

打ち消し線

見出し

引用テキストの挿入

コードの挿入

リンクの挿入

リストの挿入

番号リストの挿入

表の挿入

水平線の挿入

プレビュー

15分調べてもわからないことは
teratailで質問しよう!

ただいまの回答率
85.50%

質問をまとめることで
思考を整理して素早く解決

テンプレート機能で
簡単に質問をまとめる

質問する

関連した質問