リバースプロキシを挟むとサブドメインのサイトがhttpでアクセス出来なくなる

Question

やりたいこと

WAF製品の導入を進めていて、リバースプロキシを経由してサイトへのアクセスをするように変更をしています。
blog.hoge.comのようなドメインのサイトがあったとして、そのサイトへのアクセスをhttpsだけに統一したいと考えています。httpでアクセスがあったら、httpsにリダイレクトするというよくあるやつです。

起きている問題

リバースプロキシを経由しないと正しく、httpsにリダイレクトされるのに、リバースプロキシを経由するとリダイレクトが行われなくなる。
※ 404エラーとなります。

試してみたこと

.htaccessを以下のように書き換えてみました

RewriteEngine On
RewriteBase /

RewriteCond %{HTTPS} off
RewriteRule ^(.*)$ https://%{HTTP_HOST}%{REQUEST_URI} [R,L]

Comments

[CHERRY]

RewriteLog を記録するように設定して、どのような URL に書き換わっているのかを確認できないでしょうか？