circleciの仮想マシンからEC2にSSH接続した場合、EC2のOSの環境変数が受け取れない

Question

前提

djangodでWEBアプリを作成しています。
自動デプロイの設定をcircleciで試しておりますが、
circleciの仮想マシンからEC2にSSH接続した場合、EC2のOSの環境変数が受け取れず困っています。
原因わからず、お力添えいただけますと幸いです。

実現したいこと

circleciの仮想マシンからEC2にSSH接続した後、EC2のOSの環境変数が受け取りたい

発生している問題・エラーメッセージ

pipenv run python3 /home/**/app//*/manage.py migrateでSECRET_KEYが読み込めずエラーになっています。

+ ssh ***********@************ '
  cd ~/app/***** &&
  git pull origin master &&
  python3 -m pip install --upgrade pip &&
  python3 -m pipenv install --skip-lock &&
  cd ~/app/*****/***** &&
  pipenv run python3 /home/***********/app/*****/*****/manage.py migrate &&
  pipenv run python3 /home/***********/app/*****/*****/manage.py collectstatic --noinput &&
  pipenv run sudo systemctl reload nginx.service &&
  pipenv run pkill gunicorn &&
  pipenv run gunicorn --bind 127.0.0.1:8000 *****_pj.wsgi -D &&
  pipenv run ps -aux | grep gunicorn
'
Warning: Permanently added '************' (ED25519) to the list of known hosts.

From https://github.com/keydean130/*****
 * branch            master     -> FETCH_HEAD
   60fbb8e..9903910  master     -> origin/master
Merge made by the 'ort' strategy.
 .circleci/config.yml | 3 ++-
 1 file changed, 2 insertions(+), 1 deletion(-)
Defaulting to user installation because normal site-packages is not writeable
Requirement already satisfied: pip in /home/***********/.local/lib/python3.7/site-packages (22.3)
Installing dependencies from Pipfile...
To activate this project's virtualenv, run pipenv shell.
Alternatively, run a command inside the virtualenv with pipenv run.
Traceback (most recent call last):
  File "/home/***********/app/*****/*****/manage.py", line 22, in <module>
    main()
  File "/home/***********/app/*****/*****/manage.py", line 18, in main
    execute_from_command_line(sys.argv)
  File "/home/***********/.local/share/virtualenvs/*****-COasu-hY/lib/python3.7/site-packages/django/core/management/__init__.py", line 419, in execute_from_command_line
    utility.execute()
  File "/home/***********/.local/share/virtualenvs/*****-COasu-hY/lib/python3.7/site-packages/django/core/management/__init__.py", line 395, in execute
    django.setup()
  File "/home/***********/.local/share/virtualenvs/*****-COasu-hY/lib/python3.7/site-packages/django/__init__.py", line 24, in setup
    apps.populate(settings.INSTALLED_APPS)
  File "/home/***********/.local/share/virtualenvs/*****-COasu-hY/lib/python3.7/site-packages/django/apps/registry.py", line 122, in populate
    app_config.ready()
  File "/home/***********/.local/share/virtualenvs/*****-COasu-hY/lib/python3.7/site-packages/django/contrib/admin/apps.py", line 27, in ready
    self.module.autodiscover()
  File "/home/***********/.local/share/virtualenvs/*****-COasu-hY/lib/python3.7/site-packages/django/contrib/admin/__init__.py", line 24, in autodiscover
    autodiscover_modules('admin', register_to=site)
  File "/home/***********/.local/share/virtualenvs/*****-COasu-hY/lib/python3.7/site-packages/django/utils/module_loading.py", line 47, in autodiscover_modules
    import_module('%s.%s' % (app_config.name, module_to_search))
  File "/home/***********/.local/share/virtualenvs/*****-COasu-hY/lib64/python3.7/importlib/__init__.py", line 127, in import_module
    return _bootstrap._gcd_import(name[level:], package, level)
  File "<frozen importlib._bootstrap>", line 1006, in _gcd_import
  File "<frozen importlib._bootstrap>", line 983, in _find_and_load
  File "<frozen importlib._bootstrap>", line 967, in _find_and_load_unlocked
  File "<frozen importlib._bootstrap>", line 677, in _load_unlocked
  File "<frozen importlib._bootstrap_external>", line 728, in exec_module
  File "<frozen importlib._bootstrap>", line 219, in _call_with_frames_removed
  File "/home/***********/.local/share/virtualenvs/*****-COasu-hY/lib/python3.7/site-packages/django/contrib/auth/admin.py", line 6, in <module>
    from django.contrib.auth.forms import (
  File "/home/***********/.local/share/virtualenvs/*****-COasu-hY/lib/python3.7/site-packages/django/contrib/auth/forms.py", line 11, in <module>
    from django.contrib.auth.tokens import default_token_generator
  File "/home/***********/.local/share/virtualenvs/*****-COasu-hY/lib/python3.7/site-packages/django/contrib/auth/tokens.py", line 117, in <module>
    default_token_generator = PasswordResetTokenGenerator()
  File "/home/***********/.local/share/virtualenvs/*****-COasu-hY/lib/python3.7/site-packages/django/contrib/auth/tokens.py", line 18, in __init__
    self.secret = self.secret or settings.SECRET_KEY
  File "/home/***********/.local/share/virtualenvs/*****-COasu-hY/lib/python3.7/site-packages/django/conf/__init__.py", line 90, in __getattr__
    raise ImproperlyConfigured("The SECRET_KEY setting must not be empty.")
django.core.exceptions.ImproperlyConfigured: The SECRET_KEY setting must not be empty.
+ aws ec2 revoke-security-group-ingress --group-id sg-0dd95220d0b64b53a --protocol tcp --port 22 --cidr 54.147.101.198/32
{
    "Return": true
}

Exited with code exit status 1
CircleCI received exit code 1

該当のソースコード

# circleCIのバージョン指定
version: 2.1
jobs:
  # Djangoのテストを実行
  build:
  ~略～

  # EC2にSSH接続し、デプロイを実行する
  deploy:
    machine:
      image: ubuntu-2204:2022.04.2
    steps:
      - checkout
      # CircleCIに登録した秘密鍵を呼び出す。
      - add_ssh_keys:
          fingerprints:
            - ${KEY_FINGERPRINT}
      - run: sudo pip install awscli           
      - run:
          name: ec2 deploy
          command: |
            set -ex

            export AWS_ACCESS_KEY_ID=${AWS_ACCESS_KEY_ID}
            export AWS_SECRET_ACCESS_KEY=${AWS_SECRET_ACCESS_KEY}
            export AWS_DEFAULT_REGION="us-west-2"

            MY_SECURITY_GROUP="sg-0dd95220d0b64b53a"
            MY_IP=`curl -f -s ifconfig.me`

            trap "aws ec2 revoke-security-group-ingress --group-id $MY_SECURITY_GROUP --protocol tcp --port 22 --cidr $MY_IP/32" 0 1 2 3 15
            aws ec2 authorize-security-group-ingress --group-id $MY_SECURITY_GROUP --protocol tcp --port 22 --cidr $MY_IP/32
            ssh ${USER_NAME}@${HOST_NAME} '
              cd ~/app/nyapu &&
              git pull origin master &&
              python3 -m pip install --upgrade pip &&
              python3 -m pipenv install --skip-lock &&
              cd ~/app/nyapu/nyapu &&
              pipenv run python3 /home/nyapu_admin/app/nyapu/nyapu/manage.py migrate &&
              pipenv run python3 /home/nyapu_admin/app/nyapu/nyapu/manage.py collectstatic --noinput &&
              pipenv run sudo systemctl reload nginx.service &&
              pipenv run pkill gunicorn &&
              pipenv run gunicorn --bind 127.0.0.1:8000 nyapu_pj.wsgi -D &&
              pipenv run ps -aux | grep gunicorn
            '

# テストが成功した場合のみ、deployを実行する。
workflows:
  version: 2.1
  build_and_deploy:
    jobs:
      - build
      - deploy:
          requires:
            - build
          # masterブランチがpushされた場合のみdeployするようにする。
          filters:
            branches:
              only: master

SECRET_KEYは以下のようにOSの環境変数を読み込んでおり、ユーザの~/.bash_profileに環境変数設定しています。

import os
from django.contrib.messages import constants as messages

SECRET_KEY = os.environ.get('SECRET_KEY')

~略～

試したこと

circleciを使用せず、${USER_NAME}と同じユーザでEC2にssh接続して、
同じコマンド実行した場合は、正常に環境変数を読み取れます。

補足情報（FW/ツールのバージョンなど）

Python 3.7
Django 3.2.14
CircleCI 2.1
Amazon Linux2

Answer 1

bashの仕様で、sshした直後に環境変数が読み込めていないのが原因でした。

ssh ${USER_NAME}@${HOST_NAME} '
source ~./bash_profile
～コマンド～
'
とすることで正常に環境変数読み込めるようになりました。

参考にしたサイトは以下です。
https://nobwak.github.io/posts/2013-07-25-freebsdlinux_ssh%E7%B5%8C%E7%94%B1%E3%81%A7%E3%82%B3%E3%83%9E%E3%83%B3%E3%83%89%E5%AE%9F%E8%A1%8C%E3%81%99%E3%82%8B%E3%81%A8%E7%92%B0%E5%A2%83%E5%A4%89%E6%95%B0%E3%82%92%E8%AA%AD%E3%81%BE%E3%81%AA%E3%81%84%E3%81%A7%E3%81%94%E3%81%96%E3%82%8B/