tensorflow keras grid_searchにて AttributeError: 'NoneType' object has no attribute 'loss'

Question

import tensorflow.keras as keras
from tensorflow.keras.utils import to_categorical
from tensorflow.python.keras.models import Sequential, Model
from tensorflow.python.keras.layers.convolutional import Conv2D, MaxPooling2D
from tensorflow.python.keras.layers.core import Dense, Dropout, Activation, Flatten
import numpy as np
from tensorflow.keras.optimizers import SGD, Adam
from sklearn.model_selection import train_test_split
from PIL import Image
import glob
from tensorflow.python.keras.utils import np_utils
from tensorflow.keras.applications import VGG16

# モデルの定義

def build_model(activation,optimizer):

    model = VGG16(weights='imagenet', include_top=False, input_shape=(img_size,img_size,3))

    top_model = Sequential()
    top_model.add(Flatten(input_shape=model.output_shape[1:]))
    top_model.add(Dense(256,activation=activation))
    top_model.add(Dropout(0.5))
    top_model.add(Dense(num_classes,activation='softmax'))

    model = Model(inputs=model.input, outputs=top_model(model.output))
    model.summary()

    for layer in model.layers[:15]:
        layer.trainable = False


    model.compile(loss='categorical_crossentropy', optimizer=optimizer,metrics=['accuracy'])
import numpy as np
import pandas as pd
from pandas import Series, DataFrame
import sklearn
import pathlib
from sklearn import datasets, preprocessing
from sklearn.model_selection import GridSearchCV
from tensorflow.keras.wrappers.scikit_learn import KerasClassifier

#グリッドサーチ対象のハイパーパラメーターを準備
activation = ["relu", "sigmoid"]
optimizer = ["adam",'adagrad','sgd']
nb_epoch = [30 ,50]
batch_size = [10, 16]
 
#グリッドサーチ対象のハイパーパラメーターを辞書型にまとめる
param_grid = dict(activation=activation, optimizer=optimizer,nb_epoch=nb_epoch, batch_size=batch_size)

#モデルを作成
model = KerasClassifier(build_fn = build_model, verbose=0)
 
#グリッドサーチの実行
grid = GridSearchCV(estimator=model, param_grid=param_grid)

grid_result = grid.fit(X_train, Y_train)

---

AttributeError Traceback (most recent call last)
<ipython-input-13-d4c36aa50258> in <module>
5 grid = GridSearchCV(estimator=model, param_grid=param_grid)
6
----> 7 grid_result = grid.fit(X_train, Y_train)

~/anaconda3/lib/python3.7/site-packages/sklearn/model_selection/search.py in fit(self, X, y, groups, **fit_params)
737 refit_start_time = time.time()
738 if y is not None:
--> 739 self.best_estimator.fit(X, y, **fit_params)
740 else:
741 self.best_estimator_.fit(X, **fit_params)

~/anaconda3/lib/python3.7/site-packages/tensorflow/python/keras/wrappers/scikit_learn.py in fit(self, x, y, **kwargs)
221 raise ValueError('Invalid shape for y: ' + str(y.shape))
222 self.n_classes_ = len(self.classes_)
--> 223 return super(KerasClassifier, self).fit(x, y, **kwargs)
224
225 def predict(self, x, **kwargs):

~/anaconda3/lib/python3.7/site-packages/tensorflow/python/keras/wrappers/scikit_learn.py in fit(self, x, y, **kwargs)
157 self.model = self.build_fn(**self.filter_sk_params(self.build_fn))
158
--> 159 if (losses.is_categorical_crossentropy(self.model.loss) and
160 len(y.shape) != 2):
161 y = to_categorical(y)

AttributeError: 'NoneType' object has no attribute 'loss'

このエラーの原因がわからず困っております。
原因がわかるかたがいたらご教示いただきたいです。よろしくお願い致します。

Answer 1

シンプルに KerasClassifier の build_fn に渡している build_model が、内部で作成したモデルを返していないために、エラーメッセージ末尾の157行目で代入されている self.model が None になっていることが原因です。
self.model が None なので、エラー発生箇所の159行目では None.loss というアクセスをしようとしていることになっています。
その結果 NoneType のオブジェクトには loss というattributeがないため、AttributeError が発生している、ということになります。

添付いただいているコードを、たとえば以下のように修正するとうまく動作するはずです。

--- run.py.org  2021-03-05 14:15:39.996485896 +0000
+++ run.py      2021-03-05 14:03:41.395435669 +0000
@@ -31,6 +31,8 @@


     model.compile(loss='categorical_crossentropy', optimizer=optimizer,metrics=['accuracy'])
+    return model
+
 import numpy as np
 import pandas as pd
 from pandas import Series, DataFrame