unicorn.sock failed (13: Permission denied) while connecting to upstream

Question

昨日まで使用できていたWebアプリが、[502 Bad Gateway]が表示され利用できなくなった。
nginxのエラーログを確認すると、Webアプリのunicorn.sockのパーミッションがなく、エラーになっている。
昨日まで使用できていたのと、nginxはrootで起動しているのでunicorn.sockのパーミッションがないというエラーが腑に落ちません。
またwebアプリとnginxのconfファイルなどは変更していません。

webアプリとnginxを停止、起動してみましたが状況は変わりませんでした。
使用できなくなった原因と解決方法、お気付きな点がございましたらご教授頂けないでしょうか？

環境

サーバ：Linuxサーバ(Red Hat Enterprise Linux 6.5)
Webアプリ：ruby on railsで構築(Rails 5.2.2)
Webサーバ：nginx1.14.2

nginx

2023/12/12 16:02:02 [crit] 57912#57912: *14 stat() "/usr/share/nginx/html/[app]/public/[app]//index" failed (13: Permission denied), client: **.***.**.**, server: localhost, request: "GET /[app]/ HTTP/1.1", host: "***.***.com"
2023/12/12 16:02:02 [crit] 57912#57912: *14 stat() "/usr/share/nginx/html/[app]/public/[app]/.html" failed (13: Permission denied), client: **.***.**.**, server: localhost, request: "GET /[app]/ HTTP/1.1", host: "***.***.com"
2023/12/12 16:02:02 [crit] 57912#57912: *14 stat() "/usr/share/nginx/html/[app]/public/[app]/" failed (13: Permission denied), client: **.***.**.**, server: localhost, request: "GET /[app]/ HTTP/1.1", host: "***.***.com"
2023/12/12 16:02:02 [crit] 57912#57912: *14 connect() to unix:/usr/share/nginx/html/[app]/tmp/sockets/unicorn.sock failed (13: Permission denied) while connecting to upstream, client: **.***.**.**, server: localhost, request: "GET /[app]/ HTTP/1.1", upstream: "http://unix:/usr/share/nginx/html/[app]/tmp/sockets/unicorn.sock:/[app]/", host: "***.***.com"

$ ps aux | grep nginx
root      57904  0.0  0.0  47328  1132 ?        Ss   11:27   0:00 nginx: master process /usr/sbin/nginx -c /etc/nginx/nginx.conf
root      57905  0.0  0.0  60024  2268 ?        S    11:27   0:00 nginx: worker process
root      57906  0.0  0.0  60024  2268 ?        S    11:27   0:00 nginx: worker process
root      57907  0.0  0.0  60024  2544 ?        S    11:27   0:00 nginx: worker process
root      57908  0.0  0.0  60024  2268 ?        S    11:27   0:00 nginx: worker process
root      57910  0.0  0.0  60024  2300 ?        S    11:27   0:00 nginx: worker process
root      57911  0.0  0.0  60024  2544 ?        S    11:27   0:00 nginx: worker process
root      57912  0.0  0.0  60024  2268 ?        S    11:27   0:00 nginx: worker process
root      57913  0.0  0.0  60024  2544 ?        S    11:27   0:00 nginx: worker process

user  root;
worker_processes  auto;

error_log  /var/log/nginx/error.log warn;
pid        /var/run/nginx.pid;


events {
    worker_connections  1024;
}


http {
    include       /etc/nginx/mime.types;
    default_type  application/octet-stream;

    log_format  main  '$remote_addr - $remote_user [$time_local] "$request" '
                      '$status $body_bytes_sent "$http_referer" '
                      '"$http_user_agent" "$http_x_forwarded_for"';

    access_log  /var/log/nginx/access.log  main;

    sendfile        on;
    #tcp_nopush     on;

    keepalive_timeout  65;

    #gzip  on;

    include /etc/nginx/conf.d/*.conf;
}

upstream sample {
  server unix:/usr/share/nginx/html/sample/tmp/sockets/unicorn.sock;
}

upstream [app] {
  server unix:/usr/share/nginx/html/[app]/tmp/sockets/unicorn.sock;
}

server {
    listen       80;
    server_name  localhost tnror3 tnror3.sandisk.com;

    root      /usr/share/nginx/html;

    location /[app]{
        root      /usr/share/nginx/html/[app]/public;
        try_files $uri/index $uri.html $uri @[app];
    }

    client_max_body_size 1G;

    location @[app] {
        proxy_set_header X-Real-IP $remote_addr;
        proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
        proxy_set_header Host $http_host;
        proxy_pass http://[app];
        #fastcgi_read_timeout 180;
        send_timeout 180;
        proxy_connect_timeout 1800;
        proxy_read_timeout    1800;
        proxy_send_timeout    1800;
    }

    location /sample {
        root      /usr/share/nginx/html/sample/public;
        try_files $uri/index $uri.html $uri @sample;
    }

    location @sample {
        proxy_set_header X-Real-IP $remote_addr;
        proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
        proxy_set_header Host $http_host;
        proxy_pass http://sample;
    }
}

シンボリックリンク/usr/share/nginx/html/

total 8
-rw-r--r-- 1 root root 537 Dec  5  2018 50x.html
lrwxrwxrwx 1 root root  38 Mar 19  2019 [app] -> /home/[user]/rails/prod/[app]
-rw-r--r-- 1 root root 612 Dec  5  2018 index.html
lrwxrwxrwx 1 root root  34 Mar 19  2019 sample -> /home/[user]/rails/prod/sample

webアプリ

[2023-12-12 11:25:27.557732 #57497]  INFO -- : reaped #<Process::Status: pid 57504 exit 0> worker=1
[2023-12-12 11:25:27.557802 #57497]  INFO -- : reaped #<Process::Status: pid 57506 exit 0> worker=2
[2023-12-12 11:25:27.557870 #57497]  INFO -- : master complete
I, [2023-12-12T11:26:00.085373 #57816]  INFO -- : Refreshing Gem list
[2023-12-12 11:26:04.669826 #57816]  INFO -- : unlinking existing socket=/home/[user]/rails/prod/[app]/tmp/sockets/unicorn.sock
[2023-12-12 11:26:04.671201 #57816]  INFO -- : listening on addr=/home/[user]/rails/prod/[app]/tmp/sockets/unicorn.sock fd=11
[2023-12-12 11:26:04.685914 #57838]  INFO -- : worker=0 ready
[2023-12-12 11:26:04.687540 #57840]  INFO -- : worker=1 ready
[2023-12-12 11:26:04.688322 #57816]  INFO -- : master process ready
[2023-12-12 11:26:04.689128 #57842]  INFO -- : worker=2 ready

$ pwd
/home/[user]/rails/prod/[app]/tmp/sockets
$ ll
total 0
srwxrwxrwx 1 [user] rnroper 0 Dec 12 11:26 unicorn.sock

試したこと

webアプリ停止、起動　→　変化なし
nginx停止、起動　→　変化なし

Comments

[winterboum]

rootで起動しても実効userが別人になっていたりしませんか？
あと、
ソケットに rw権限はついてますか
ああ、rwはついてますね。

[Amkys]

起動はsudoコマンド使用し、rootで起動しています。
sudo service nginx start

$ ps aux | grep nginx
root 93701 0.0 0.0 47328 1132 ? Ss 08:37 0:00 nginx: master process /usr/sbin/nginx -c /etc/nginx/nginx.conf
root 93702 0.0 0.0 60024 2204 ? S 08:37 0:00 nginx: worker process
root 93703 0.0 0.0 60024 2268 ? S 08:37 0:00 nginx: worker process
root 93704 0.0 0.0 60024 2544 ? S 08:37 0:00 nginx: worker process
root 93705 0.0 0.0 60024 2268 ? S 08:37 0:00 nginx: worker process
root 93707 0.0 0.0 60024 2268 ? S 08:37 0:00 nginx: worker process
root 93708 0.0 0.0 60024 2268 ? S 08:37 0:00 nginx: worker process
root 93709 0.0 0.0 60024 2300 ? S 08:37 0:00 nginx: worker process
root 93710 0.0 0.0 60024 2268 ? S 08:37 0:00 nginx: worker process

Answer 1

webアプリ起動時に、unicorn_error.logに以下のunlinkingがあり、
[2023-12-13 09:49:36.795450 #10866] INFO -- : unlinking existing socket=/home/afujishima/rails/prod/[app]/tmp/sockets/unicorn.sock

もしかしたらDB(postgres)の接続に失敗しているのかと思い、postgresの確認をしたところ
$ pg_ctl -D /var/lib/pgsql/9.6/data status
could not change directory to "/home/[user]/rails/prod/[app]/log": Permission denied
いつの間にパーミッションが変更されたのか分かりませんが、それが原因でした。

ひとまず上層をたどりながらフルコントロールにしていき、Webブラウザで表示確認することが出来ました。
なぜ、パーミッションが変わったかは不明ですが、階層毎に適正なパーミッションを設定します。

回答、閲覧し思考して頂きました皆様、ありがとうございました。

Answer 2

upstream が server unix:/usr/share/nginx/html/[app]/tmp/sockets/unicorn.sock なのに
unicornのlogでは listening on addr=/home/[user]/rails/prod/[app]/tmp/sockets/unicorn.sock fd=11
で一致していないのが原因では？

Comments

[Amkys]

/usr/share/nginx/html/で以下のようにシンボリックリンクしており
lrwxrwxrwx 1 root root 38 Mar 19 2019 [app] -> /home/[user]/rails/prod/[app]

lsコマンドでも、確認できています。
$ ll /usr/share/nginx/html/[app]/tmp/sockets/unicorn.sock
srwxrwxrwx 1 [user] rnroper 0 Dec 13 08:31 /usr/share/nginx/html/[app]/tmp/sockets/unicorn.sock

設定は合っていますし、nginxの設定関係は何も変更はないのです。