pyファイルの実行（前処理大全［データ分析のためのSQL/R/Python実践テクニック］）

Question

前処理大全［データ分析のためのSQL/R/Python実践テクニック］を
読んでいるのですが、早速躓いております。

普段、Jupyter notebookでしかpythonを触っていないのですが、
この本では.pyファイルになっており、動かすことができません。

PCはWindowsです。

コマンドプロンプトから、python ファイル名.pyとしてpyファイルを実行させると
下記のエラーが出ます。

Traceback (most recent call last):
File "python_2_not_awesome.py", line 1, in <module>
from preprocess.load_data.data_loader import load_hotel_reserve
ModuleNotFoundError: No module named 'preprocess'

ファイルの1行目は読みにいけているため、パスは通っていそうですが
モジュールがないと言われます。

基本的な質問で申し訳ありませんが、教えていただけると助かります。

Comments

[atmn3356]

モジュールはきちんとインストールされていますか？pip show ＜インストールモジュール名＞で確認してみて下さい

[quickquip]

何ページを読んでるんでしょうか……

[yuyu127]

失礼しました。29ページ目のpython_2_not_awesome.pyを試そうとコマンドプロンプトから呼び出して上記のエラーが出ました。

Answer 1

回答というより試した結果の報告になります。

OS: Mac
PyCharmインストール
下記リポジトリをcloneしました
https://github.com/ghmagazine/awesomebook

pip install pandas後

PyCharmでpython_2_not_awesome.pyRUNボタンを押下

# python_2_not_awesome.py
from preprocess.load_data.data_loader import load_hotel_reserve
customer_tb, hotel_tb, reserve_tb = load_hotel_reserve()

# 下の行から本書スタート
# iloc関数の2次元配列の1次元目に:を指定することで、全行を抽出
# iloc関数の2次元配列の2次元目に抽出したい行番号の配列を指定することで、列を抽出
# 0:6は、[0, 1, 2, 3, 4, 5]と同様の意味
reserve_tb.iloc[:, 0:6]

問題なく動作しました、このソースコードはjupyter notebooks用？に作られているので
何も表示されないが出力結果としては正しいです

Comments

[R.Shigemori]

そうですね。
そのままの丸ごとコピーして、そのまま実行するのが一番ですね。そうすれば、著者の作った自作スクリプトのdata_loader.pyもうまくimportできるはずですね。

[yuyu127]

ありがとうございました。
まだ全て理解できたわけではありませんが、少しずつ調べながら解決したいと思います。

Answer 2

githubから取ってきた中身ににpreprocessというフォルダがあります。

そのフォルダが見える状況でpwdすると、パスが得られます。

export PYTHONPATH=$(pwd):$PYTHONPATH

をすることで、そのパスをpythonのインタプリタが参照するようになります。

その後に実行してみてください。

Comments

[mkgrei]

そして、今気づく、Windowsであると…
pythonのパスの追加の仕方。
https://www.pythonweb.jp/tutorial/install/index3.html

[yuyu127]

環境構築で躓いているので、そこから調べていこうと思います。
ありがとうございました。

Answer 3

とにかく動けばいいというのであれば、load_dataの下にあるdata_loader.pyを今、実行しているnotebookのあるディレクトリにコピーして

import data_loader

とすればうまくいくはずです。

もう少しエレガントにやるとすれば、load_dataそのものをnotebookのあるディレクトリにコピーするといいはずですが、やったことがないのでわかりません。

mkgreiさんの方法もいいのですが、環境変数に手を加えることに慣れていないと他のアプリに影響しかねないので避けたほうがいいと思います。

Comments

[yuyu127]

R.Shigemori様
ありがとうございました。importすることはできました。
そこからはもう一度調べながら読み進めたいと思います。

Answer 4

preprocessモジュールの正体は何ですか？

• インストールしないといけないライブラリ
• （その本で作るように言っている）置いておかないといけないファイル

いろいろ考えられますが・・・

Comments

[yuyu127]

ありがとうございます。
説明が足らず申し訳ありませんでした。
前処理大全［データ分析のためのSQL/R/Python実践テクニック］という本に記載してある
https://github.com/ghmagazine/awesomebookを利用しております。

[hayataka2049]

そのページだとpycharmでやれって書いてあるんですが、その辺の手順の説明は本に載ってないですか？

[wakame]

リポジトリのリンクはここのコメントではなく質問に追記するようにして、回答者全員に見えるようにしたほうがいいですよ。