入手したソースコードを動かしたい(numpy)

Question

VSCodeでnumpyのimportができない

問題：ライブラリのインポートに失敗します。

最近機械学習の本を読み勧めて、畳み込みニューラルネットワークの実装(手書き)まで学習しました。
次の勉強として、実践に取り掛かっていきたいと思っていて、こちらの記事のコードを動かしながら読み解いていこうと考えています。
https://qiita.com/kshina76/items/5686923dee2889beba7c
コードを動かして、挙動を確かめたり、改変して他のデータでテストすることが目的です。

自環境

LinuxMint 20.x
64bit

VSCode
Python 3.8.8
Colaboratory

発生している問題・エラーメッセージ

上記のソースコード(audio-classification-master/cnn_reco_various_feature
/cnn_reco.py, generator.pyとも)を実行したところ、インポートの段階でエラーが発生します。

1. SyntaxError: invalid syntax
　現環境でそのまま実行した場合のエラー
　14行目：`from keras.layers import pip3 install numpy pip3 install numpyEmbedding`

2. ModuleNotFoundError: No module named 'numpy'
　1.の箇所をコメントアウトしたときのエラー

該当のソースコード

エラー箇所とエラー出力(表記まま)を見出しにしています。
コメントアウトは、今回エラーに関係なかった箇所を実施しています。

# cnn_reco.py
"""
開発環境
> python3.7.3
> Anaconda3
> keras2.2.4
> tensorflow1.13.1
"""

- import numpy as np
- # ModuleNotFoundError: No module named 'numpy' 
import os
import glob
import librosa
import random
import math
import generator

import matplotlib.pyplot as plt
from sklearn.preprocessing import MinMaxScaler, LabelBinarizer
from sklearn.model_selection import train_test_split
from keras.models import Sequential, load_model, Model
from keras.layers import Dense, Activation, Dropout, Input
-                             _
- from keras.layers import pip3 install numpy pip3 install numpyEmbedding
- # SyntaxError: invalid syntax
from keras.layers import Conv1D, GlobalAveragePooling1D, MaxPooling1D
from keras.optimizers import Adam
from keras.utils import Sequence
from keras.utils import np_utils
”””
class CNN():

	def build_model(self):
		inputs = Input(shape=(193, 1))
		x = Conv1D(64, 3, activation='relu')(inputs)
		x = Conv1D(64, 3, activation='relu')(x)
		x = MaxPooling1D(3)(x)
		x = Conv1D(128, 3, activation='relu')(x)
		x = Conv1D(128, 3, activation='relu')(x)
		x = GlobalAveragePooling1D()(x)
		x = Dropout(0.5)(x)
		x = Dense(3, activation='softmax')(x)
		model = Model(input=inputs, output=x)
		optimizer = Adam()
		model.compile(loss="categorical_crossentropy",
					optimizer=optimizer, metrics=['accuracy'])
		model.summary()

		return model

def get_path_labels(self):
	#onseiディレクトリ下のディレクトリのフルパスを取得
	dirs_path = glob.glob(data_path)

	labels = []
	files_path = []
	label_count = -1
	for dir_path in dirs_path:
		label_count += 1
		for file_path in glob.glob(dir_path + '/*'):
			files_path.append(file_path)
			labels.append(label_count)

	files_path = np.asarray(files_path)
	labels = np.asarray(labels)

	# one hot encording
	lb = LabelBinarizer()
	lb.fit(labels)
	labels = lb.transform(labels)

	return files_path, labels

if __name__ == '__main__':
	sample_rate = 44100
	threshold = 20
	sample_length = 7680
	batch_size = 16
	epoch = 50
	save_model_name = 'dnn_reco.h5'
	data_path = './onsei/*'

	files_path, labels = get_path_labels(data_path)

	for i in range(len(labels)):
		print('{} : {}'.format(files_path[i], labels[i]))

	# パスとラベルから学習、テスト、評価データを作成
	X_train, X_test, y_train, y_test = train_test_split(files_path, labels, train_size=0.8)
	X_train, X_val, y_train, y_val = train_test_split(X_train, y_train, train_size=0.8)

	# ジェネレータを作成
	train_batch_generator = generator.BatchGenerator(X_train, y_train, batch_size, sample_rate, sample_length, threshold)
	test_batch_generator = generator.BatchGenerator(X_val, y_val, batch_size, sample_rate, sample_length, threshold)

	# モデル構築
	dnn = CNN()
	model = dnn.build_model()

	# 学習
	fit_history = model.fit_generator(train_batch_generator, epochs=epoch, verbose=1,
										steps_per_epoch=train_batch_generator.batches_per_epoch,
										validation_data=test_batch_generator,
										validation_steps=test_batch_generator.batches_per_epoch,
										shuffle=True
										)
	model.save(save_model_name)
”””

試したこと

・ from keras.layers import pip3 install numpy pip3 install numpyEmbeddingのpip3を削除、やコメントアウト
・ numpyのpipアンインストール/インストール
・ VSCodeの再インストール
・ Colaboratoryでの実行

補足情報（FW/ツールのバージョンなど）

当方なにもわかっていないのですが、何かしらご教示いただけると助かります。

Comments

[fiveHundred]

> 1. の箇所をコメントアウトしたときのエラー

該当箇所が分かりませんので記載してください。

> 該当のソースコード

なんか、変なゴミみたいなの（-や_）がありますが、これで実行コードそのままなのでしょうか？

[Daregada]

普通に「git clone」してみましたが、該当するファイルの先頭は「import numpy as np」から始まりますね。Pythonにnumpyが入っていないというオチでは。

[miori_tsuki]

ターミナルで確認して見ましたが、入っているように見えます。
(それともパスが良くないですか？？)
(base):~$ pip3 install numpy
Requirement already satisfied: numpy in ./anaconda3/lib/python3.8/site-packages (1.21.2)
(base):~$ /bin/python3 /home/user/ダウンロード/storage/Python/audio-classification-master/4_cnn_reco_various_feature/generator.py
Traceback (most recent call last):
File "/home/user/ダウンロード/storage/Python/audio-classification-master/4_cnn_reco_various_feature/generator.py", line 1, in <module>
import numpy as np
ModuleNotFoundError: No module named 'numpy'
となっています。

import numpy as npをコメントアウトし、実行して、No module named ~になった場所をコメントアウトしてきましたが、
- numpy
- librosa
- matplotlib
- keras
がありました。

[Daregada]

ええと、「-」がコメント化する記号だと思ってますか?
Pythonの1行コメントは「#」で始まります。

[miori_tsuki]

いいえ、エラー箇所がわかりやすくなるようにと見出し的に使用しました
次回からはちゃんと原ソースのまま引用します。
お騒がせしました。
(なお、問題のほうは解決しています)

Answer 1

import とpip3がコメントでも文字列でもないのに両方が入っているソースコードが文法エラーにならないはずがありません。

Pythonの中でインストールをやろうとするのは止めましょう。
Pythonを動かすための準備はシェル(含コマンドプロンプト)で実行しましょう。

• とりあえずコメントアウト処置で実行したのですが、numpyのimportエラーで躓いています。

ということなら、以下の手順でnumpyをインストールしましょう。

まず、cnn_reco.pyの最初に以下の3行を追加します。

import sys
print(sys.executable)
exit()

もしもこれでpython2.7のパスが表示されるようであればVSCodeの設定をPython3系に切り替えましょう。
表示されるpythonのフルパスが仮に'/aaa/bbb/ccc/python'だとした場合、
ターミナルで

/aaa/bbb/ccc/python -m pip install numpy

で必要なnumpyをインストールしましょう。ただし、Anacondaならばpipではなくcondaを使いましょう。

Comments

[miori_tsuki]

ありがとうございます。
私もそこにひっかかっていて実際にそういう方法が存在するのか困っていました。
とりあえずコメントアウト処置で実行したのですが、numpyのimportエラーで躓いています。

[miori_tsuki]

記載の通りの手順で各ライブラリを入れたらなんとかなりました。
助かりました。

ほかに、AdamとSequenceのインポートには"tensorflow."の付与が必要だったりといろいろ勉強になりました。