herokuで公開されているページに書き込まれた情報をデータベースとして保存したいがエラーとなる。

Question

前提・実現したいこと

Herokuを使ってpythonのflaskで作ったウェブアプリケーションを公開することができました。
要約アプリ（クロムでしか動かないです）
次はこのウェブアプリケーションに書き込まれた情報と結果をDBに書き込み、それをherokuのサーバーに保存。その後参照したいと考えています。

下のようにユーザが書き込んだ情報や日付と結果をDBに書き込み、それを見たいと考えています。

上のようなシステムを構築するためにpythonで「データベースを作って、インサートしてheroku上のサーバに保存」するプログラムを書き、ローカルで上手く動いているのを確認して、Heroku上にアップロードしました。しかしURLにアクセスするとApplication eroor となりました。

参考サイト
参考

発生している問題・エラーメッセージ

2019-03-15T02:06:33.228004+00:00 app[web.1]: [2019-03-15 02:06:33 +0000] [11] [INFO] Booting worker with pid: 11
2019-03-15T02:06:33.825657+00:00 heroku[web.1]: State changed from starting to up
2019-03-15T02:06:55.075985+00:00 heroku[web.1]: State changed from up to crashed
2019-03-15T02:06:54.875006+00:00 heroku[web.1]: Process running mem=1256M(245.3%)
2019-03-15T02:06:54.875141+00:00 heroku[web.1]: Error R15 (Memory quota vastly exceeded)
2019-03-15T02:06:54.875232+00:00 heroku[web.1]: Stopping process with SIGKILL
2019-03-15T02:06:55.005964+00:00 heroku[router]: at=error code=H13 desc="Connection closed without response" method=GET path="/" host=miyarecruit.herokuapp.com request_id=b6c49dbe-f088-4887-b89e-bb53bc8cc123 fwd="133.95.168.128" dyno=web.1 connect=0ms service=19292ms status=503 bytes=0 protocol=https
2019-03-15T02:06:55.062834+00:00 heroku[web.1]: Process exited with status 137
2019-03-15T02:07:14.143641+00:00 heroku[router]: at=error code=H10 desc="App crashed" method=GET path="/" host=miyarecruit.herokuapp.com request_id=0d9750df-a411-4769-9488-10c3d3e9c617 fwd="133.95.168.128" dyno= connect= service= status=503 bytes= protocol=https

該当のソースコード

変更点 モジュールに文章と文字数をいれて、帰ってきた結果と時間と元の文章をDBに追加する処理を加えています。

@app.route('/predict/',methods=['GET','POST'])
def predict():
  
    sum_sentence,sum_num = summarize.dosum(num,sentence)
    
    
    #DBに追加して、書き込み
    #データベース接続のため
    connection = psycopg2.connect("host=ec2-23-23-195-205.compamazonaws.com port=5432 dbname=demjsgs9 user=bei  password=9eb69de7620b3fbf0fbdf3b5c097396")
    cursor = connection.cursor()
    cursor.execute("select version()")

    #時間確保のため

    import datetime
    dt_now = datetime.datetime.now()
    #print(dt_now)
    dt_now = str(dt_now)
    #print(dt_now)
    
    cursor.execute("INSERT INTO test2 (time, input, output) VALUES (%s, %s, %s)", (dt_now, sentence, sum_sentence))
    cursor.execute("SELECT * FROM test2;")
    cursor.fetchone()
    connection.commit()
    cursor.close
    connection.close()
    
    
    return json.dumps({
        "参照サイト数":sum_sentence,
        "要約文字数":str(sum_num),

    }

試したこと

DBの処理を追加する前はログが下のようになっていました。

しかしいまは![イとなっています。
ログで変わったところというとメモリ量2倍ぐらい変わっているのですが、なぜそうかわってしまってるのかがわかりません。
（色々試しているのですが、DB処理を加える前のプログラムをherokuに送ってもApplication error となってしまうので、今はロールバックで上手くいった時のを残しています。）

プログラムは下のようにしています。

git add .
git commit -m""
git heroku push master 

補足情報（FW/ツールのバージョンなど）

ここにより詳細な情報を記載してください。

Comments

[yoorwm]

とりあえず、メモリの使い過ぎで止められているようなメッセージが出ている気がするから、データ（短い文字列とか）を登録するだけ、な部分を作って試してみてはどうでしょうか？

[meJ15]

今のURL（機械学習で文章を要約するプログラムでは）ではメモリを125％使っても動いていることを確認はできていますが、もう一回、同じものをgit heroku push masterするとメモリ使い過ぎというエラーが出るようになっています。herokuで「できるだけメモリ使わないように抑えて」というような設定があるのですかね？今のプログラムをどうアップロードしたのか忘れてしまったのが、問題なのですが。

[yoorwm]

一応聞いておきますが、余裕のあるプランを選択していますか？
https://jp.heroku.com/pricing

[meJ15]

すみません。無料プランです...

[meJ15]

heroku config:set WEB_CONCURRENCY=1とするとメモリ量が抑えられました。
DB処理を付け足していないのは動くようになることがわかりました。
しかしDB処理を追加したものが、

2019-03-15T04:37:28.060007+00:00 heroku[router]: at=error code=H12 desc="Request timeout" method=GET path="/" host=miyarecruit.herokuapp.com request_id=456e1cbe-085d-42cb-9dea-2855632f95e4 fwd="133.95.168.128" dyno=web.1 connect=39ms service=30000ms status=503 bytes=0 protocol=https
2019-03-15T04:37:39.214685+00:00 heroku[router]: at=error code=H12 desc="Request timeout" method=GET path="/" host=miyarecruit.herokuapp.com request_id=b11304fc-050a-48e9-bc58-5fd5a69e57c3 fwd="133.95.168.128" dyno=web.1 connect=2ms service=30000ms status=503 bytes=0 protocol=https
2019-03-15T04:37:45.892640+00:00 heroku[web.1]: Process running mem=828M(161.9%)
2019-03-15T04:37:45.892805+00:00 heroku[web.1]: Error R14 (Memory quota exceeded)
というエラーが出るようになってしましました。

[ryu22e]

念のため確認したいのですが、質問文「該当のソースコード」の「connection = psycopg2.connect」に書かれているDBへの接続情報は、もしかして実際に接続できる情報ではありませんか？
もしそうなら、質問文のコードは伏せ字にして、今使っているuser、passwordは変更しておいたほうがいいです。

[meJ15]

ネットリテラシーが低すぎました。ありがとうございます。
よくわからないのですが、使えるようになりました。

[ryu22e]

「よくわからないのですが、使えるようになりました」というのは、私のコメントへの返信ですか？ それとも別の話？
私のコメントへの返信なら、ちょっと意味が分からないのですが……

[meJ15]

すみません。あなたのコメントの返信ではなくウェブページの話です。。

ユーザ名とパスワードを載せてしまっていることに気付かず、あなたのコメントで気付きました。ありがとうございます。（ネットリテラシーが低すぎました。ありがとうございます。）

話変わりまして自分の要約アプリなのですが、昼寝して起きて動かしてみると、ウェブページが動くようになっていました（よくわからないのですが、使えるようになりました）

ということが言いたかったです。迷惑をおかけしました。

Answer 1

heroku run rake db:migrate
heroku restart　をすることでうまく動くようになりました