質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

ただいまの
回答率

90.45%

  • Python 3.x

    10312questions

    Python 3はPythonプログラミング言語の最新バージョンであり、2008年12月3日にリリースされました。

  • CentOS

    3218questions

    CentOSは、主にRed Hat Enterprise Linux(RHEL)をベースにした、フリーのソフトウェアオペレーティングシステムです。

  • Django

    1704questions

    DjangoはPythonで書かれた、オープンソースウェブアプリケーションのフレームワークです。複雑なデータベースを扱うウェブサイトを開発する際に必要な労力を減らす為にデザインされました。

  • nginx

    1054questions

    nginixは軽量で高性能なwebサーバーの1つです。BSD-likeライセンスのもとリリースされており、あわせてHTTPサーバ、リバースプロキシ、メールプロキシの機能も備えています。MacOSX、Windows、Linux、上で動作します。

  • Gunicorn

    30questions

    Gunicorn (Green Unicorn)は、Rubyのunicornをベースに開発されたUNIX向けのPython製HTTPサーバです。他のライブラリとの依存関係がないため、容易にインストールして使用できます。

502 errorの対処方法。処理ファイルが大きいとエラーになります。

解決済

回答 1

投稿 編集

  • 評価
  • クリップ 1
  • VIEW 559

bunks

score 21

現在djangoで開発している中で502が出る時があり,それは処理するファイルが大きく,実行時間が長い時です。
エラーログは以下の通りで,

upstream prematurely closed connection while reading response header from upstream, client


こちらQiita記事を参考にしたところ,gunicorn側のtimeoutなのではないかと思っています。(アプリ側はdebug=trueですがエラーは出ないです)

そのため,gunicorn.confとnginx.confを以下のように設定しましたが,gunicorn.confの設定でtimeout 3600; を追加するとエラーが出て,またそれ抜きの設定では502になります。

どのようにすれば長い処理でもkillされないtimeoutの設定にできますか?

server {
        listen 80;
        server_name IPアドレス;
        keepalive_timeout 3600;
        timeout 3600;              <<この行を追加するとエラーになります
        location /static { 
                alias /var/www/static;
        }

        location / {
                proxy_pass http://127.0.0.1:8000;
                proxy_set_header Host $http_host;
                proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
        }
}
user nginx;
worker_processes auto;
error_log /var/log/nginx/error.log;
pid /run/nginx.pid;

# Load dynamic modules. See /usr/share/nginx/README.dynamic.
include /usr/share/nginx/modules/*.conf;

events {
    worker_connections 1024;
}

http {
    log_format  main  '$remote_addr - $remote_user [$time_local] "$request" '
                      '$status $body_bytes_sent "$http_referer" '
                      '"$http_user_agent" "$http_x_forwarded_for" $request_time';

    access_log  /var/log/nginx/access.log  main;

    sendfile            on;
    tcp_nopush          on;
    tcp_nodelay         on;
    keepalive_timeout   3600;
    proxy_connect_timeout       3600;
    proxy_send_timeout          3600;
    proxy_read_timeout          3600;
    send_timeout                3600;
    types_hash_max_size 2048;

    include             /etc/nginx/mime.types;
    default_type        application/octet-stream;

    # Load modular configuration files from the /etc/nginx/conf.d directory.
    # See http://nginx.org/en/docs/ngx_core_module.html#include
    # for more information.
    include /etc/nginx/conf.d/*.conf;

    server {
        listen       80 default_server;
        listen       [::]:80 default_server;
        server_name  _;
        root         /usr/share/nginx/html;

        # Load configuration files for the default server block.
        include /etc/nginx/default.d/*.conf;

        location / {
        }

        error_page 404 /404.html;
            location = /40x.html {
        }

        error_page 500 502 503 504 /50x.html;
            location = /50x.html {
        }
    }
}
  • 気になる質問をクリップする

    クリップした質問は、後からいつでもマイページで確認できます。

    またクリップした質問に回答があった際、通知やメールを受け取ることができます。

    クリップを取り消します

  • 良い質問の評価を上げる

    以下のような質問は評価を上げましょう

    • 質問内容が明確
    • 自分も答えを知りたい
    • 質問者以外のユーザにも役立つ

    評価が高い質問は、TOPページの「注目」タブのフィードに表示されやすくなります。

    質問の評価を上げたことを取り消します

  • 評価を下げられる数の上限に達しました

    評価を下げることができません

    • 1日5回まで評価を下げられます
    • 1日に1ユーザに対して2回まで評価を下げられます

    質問の評価を下げる

    teratailでは下記のような質問を「具体的に困っていることがない質問」、「サイトポリシーに違反する質問」と定義し、推奨していません。

    • プログラミングに関係のない質問
    • やってほしいことだけを記載した丸投げの質問
    • 問題・課題が含まれていない質問
    • 意図的に内容が抹消された質問
    • 広告と受け取られるような投稿

    評価が下がると、TOPページの「アクティブ」「注目」タブのフィードに表示されにくくなります。

    質問の評価を下げたことを取り消します

    この機能は開放されていません

    評価を下げる条件を満たしてません

    評価を下げる理由を選択してください

    詳細な説明はこちら

    上記に当てはまらず、質問内容が明確になっていない質問には「情報の追加・修正依頼」機能からコメントをしてください。

    質問の評価を下げる機能の利用条件

    この機能を利用するためには、以下の事項を行う必要があります。

質問への追記・修正、ベストアンサー選択の依頼

  • coco_bauer

    2019/01/01 17:22

    nginxのログを調べれば、何が起きているのかが判るかもしれません。502が起きる原因は様々なので、まずはログに記録されたエラーを調べてみては如何ですか。

    キャンセル

  • bunks

    2019/01/01 18:29

    返信ありがとうございます。
    ログを見た所,gunicornのtimeout設定が原因のように感じたので,原因調査と対策を合わせて追記しました。未だ解決していないので,再度確認していただけると幸いです。

    キャンセル

回答 1

checkベストアンサー

0

私も同様の問題に遭遇して解決方法を検討している最中なので、
具体的な回答ではないのですが、何か解決策のきっかけにでもなればということで・・・

タイムアウト時間を調整しても、リクエストの数や、サーバーの処理能力、入出力の処理能力によって、想定より増大する可能性があります。また、ブラウザ側でのタイムアウトも関係してくると思います。

サーバーサイドで処理時間がかかってしまう恐れがある処理は、タイムアウト時間を長くして対処するのではなく、フロントエンドからのリクエストには、処理中であること、および、サーバーサイドの処理終了を監視する非同期処理を含んだレスポンスを戻し、サーバーサイドの処理終了を感知したところで、改めて結果のリクエストをするような、非同期の仕組みが必要だと思います。

何らかの画像を生成するリクエストを送った時に、生成のリクエストに対するレスポンスでは、処理パーセントを表示するためのフロントエンドが戻され、そのフロントエンドで、非同期問い合わせを行い処理パーセントを更新、100%になった際に、生成ファイルを要求するためのボタンが有効になる。というような流れがイメージしやすいと思います。

投稿

  • 回答の評価を上げる

    以下のような回答は評価を上げましょう

    • 正しい回答
    • わかりやすい回答
    • ためになる回答

    評価が高い回答ほどページの上位に表示されます。

  • 回答の評価を下げる

    下記のような回答は推奨されていません。

    • 間違っている回答
    • 質問の回答になっていない投稿
    • スパムや攻撃的な表現を用いた投稿

    評価を下げる際はその理由を明確に伝え、適切な回答に修正してもらいましょう。

  • 2019/01/02 16:42 編集

    ありがとうございます。
    httpレスポンスは先に返して,celeryなどを使ってバックグラウンドで処理を実行する形ですね。
    ご回答いただいて調べたところ,以下のURLあたりと同じような処置かと。
    https://leben.mobi/blog/django_celery1/python/
    https://teratail.com/questions/130909
    非同期処理について初めて知り,とても参考になりました。
    celery導入して,おって追記・回答しようと思います。

    キャンセル

15分調べてもわからないことは、teratailで質問しよう!

  • ただいまの回答率 90.45%
  • 質問をまとめることで、思考を整理して素早く解決
  • テンプレート機能で、簡単に質問をまとめられる

同じタグがついた質問を見る

  • Python 3.x

    10312questions

    Python 3はPythonプログラミング言語の最新バージョンであり、2008年12月3日にリリースされました。

  • CentOS

    3218questions

    CentOSは、主にRed Hat Enterprise Linux(RHEL)をベースにした、フリーのソフトウェアオペレーティングシステムです。

  • Django

    1704questions

    DjangoはPythonで書かれた、オープンソースウェブアプリケーションのフレームワークです。複雑なデータベースを扱うウェブサイトを開発する際に必要な労力を減らす為にデザインされました。

  • nginx

    1054questions

    nginixは軽量で高性能なwebサーバーの1つです。BSD-likeライセンスのもとリリースされており、あわせてHTTPサーバ、リバースプロキシ、メールプロキシの機能も備えています。MacOSX、Windows、Linux、上で動作します。

  • Gunicorn

    30questions

    Gunicorn (Green Unicorn)は、Rubyのunicornをベースに開発されたUNIX向けのPython製HTTPサーバです。他のライブラリとの依存関係がないため、容易にインストールして使用できます。