Q&A
環境構築も含めてプログラミングだと認識しています。
実現したいこと
Docker環境内でTensorFlowを使う。
前提
TensorFlow Dockerを参照して、Dockerコンテナを作成しました。
numpy等の追加パッケージをpyproject.tomlに記載した状態でpoetryでインストールしました。
インストールは成功して、コンテナ内でnumpyの情報を確認できる状態です。
〇追記6/16
poetryでのパッケージインストール時のコマンドです。
docker-compose run --entrypoint "poetry install --no-root" demo-app
〇追記6/16
pyproject.tomlの中身を下記に示します。
[tool.poetry]
name = "demo-app"
version = "0.1.0"
description = ""
authors = ["Your Name you@example.com"]
readme = "README.md"
packages = [{include = "demo_app"}]
[tool.poetry.dependencies]
python = ">=3.9,<3.11"
fastapi = "^0.97.0"
uvicorn = {extras = ["standard"], version = "^0.22.0"}
python-multipart = "^0.0.6"
numpy = "^1.24.3"
matplotlib = "^3.7.1"
tensorflow-datasets = "^4.9.2"
tensorflow = "^2.12.0"
tensorflow-io-gcs-filesystem = "^0.23.1"
[build-system]
requires = ["poetry-core"]
build-backend = "poetry.core.masonry.api"
発生している問題・エラーメッセージ
コンテナ内のスクリプトでnumpyをimportするときに見つかりません。
試したこと
コンテナ内でpoetry show -vを実行してnumpyのインストール場所を確認しました。
（コンテナ内にはdocker-compose exec demo-app bashで入っています。）
/src/.venvと表示されたので、
ENV PTTHONPATH "${PYTHONPATH}:/src/.venv"をDockerfileに追記して再ビルドしてみましたが、結果変わりませんでした。
助言を頂けると幸いです。
〇追記6/15
スクリプトに下記を追加して、一時的にパスを通しました。
sys.path.append("/src/.venv")
print(sys.path)
しかし、実行したpythonが見ているパスは適切なはずなのに、numpyがありません。
['/src/test', '/src/test', '/src', '/usr/local/lib/python39.zip', '/usr/local/lib/python3.9', '/usr/local/lib/python3.9/lib-dynload', '/usr/local/lib/python3.9/site-packages', '/src/.venv']
Traceback (most recent call last):
File "/src/test/test.py", line 11, in <module>
import numpy as np
ModuleNotFoundError: No module named 'numpy'
> 実行したpythonが見ているパスは適切なはずなのに、numpyがありません。
pythonで
import os
print(os.listdir("/src/.venv"))
を実行したら、「/src/.venv」に有るディレクトリやファイルの名前が表示されますが、その中に名前が「numpy」で始まるものがありますでしょうか？
回答ありがとうございます。
import os
print(os.listdir("/src/.venv"))
↑を実行したところ、
['.gitignore', 'bin', 'lib', 'pyvenv.cfg', 'share']
numpyはないようです。
何故なのでしょうか？？
良く見るとパスがホスト側っぽい記述になっているので、
['/src/test', '/src/test', '/src', '/usr/local/lib/python39.zip', '/usr/local/lib/python3.9', '/usr/local/lib/python3.9/lib-dynload', '/usr/local/lib/python3.9/site-packages', '/src/.venv']
仮想環境の記述に変更したら解決しました。
/src/.venv/lib/python3.9/site-packages
↑のディレクトリにnumpyありました。
> 解決しました。
tensorflowも使えるようになったのでしょうか？
tensorflowについてはまだ確認できていません。
import時にTensorRTがないという警告が出たのですが、その際にホスト側でネットワーク設定が消えて？インターネット接続できない状態なので、その対応をしています。
Tensorfolowのimport時に_pywrap_tfeがないと表示されます。
ModuleNotFoundError: No module named 'tensorflow.python._pywrap_tfe'
ディレクトリをみると、_pywrap_tfe.soはあるので、また、パスの問題でしょうか。
とりあえず、tensorflowのimportは問題ありませんでした。
使用時に別の問題が見つかった場合は新しく質問したいと思います。
自己解決
