CNNで学習データを判別したところ精度が悪いです。なぜでしょうか。

Question

前提・実現したいこと

CNNでkerasを使って画像判別をしています。画像データを学習させ、得られた重みを使って、確認のため学習に用いた画像を改めて判別させたところ、学習時の精度に比べ著しく低いです。なぜでしょうか。
学習データは360枚×8クラスで、精度を図るためのテストデータは40枚×8クラスです。また、改めて判別させたデータは学習データの中から選んだ64枚です。学習時は、学習データの判別精度は97％まで上がり、テストデータの判別制度は96％と表示されていました。しかし、改めて判別させた64枚の学習データのうち正しく判別できたのは30枚でした。

発生している問題・エラーメッセージ

試したこと

ここに問題に対して試したことを記載してください。

補足情報（FW/ツールのバージョンなど）

ここにより詳細な情報を記載してください。