🎄teratailクリスマスプレゼントキャンペーン2024🎄』開催中!

\teratail特別グッズやAmazonギフトカード最大2,000円分が当たる!/

詳細はこちら
Keras

Kerasは、TheanoやTensorFlow/CNTK対応のラッパーライブラリです。DeepLearningの数学的部分を短いコードでネットワークとして表現することが可能。DeepLearningの最新手法を迅速に試すことができます。

機械学習

機械学習は、データからパターンを自動的に発見し、そこから知能的な判断を下すためのコンピューターアルゴリズムを指します。人工知能における課題のひとつです。

データマイニング

データマイニングは、購買履歴やクレジットカードの利用履歴、電話の通話履歴など企業にある大量のデータを解析して、その中に隠れたパターンやルールを探し出す技術です。DMと略されることもあります。

統計

統計は、集団現象を数量で把握することです。また、調査で得られた性質や傾向を数量的に表したデータのことをいいます。

Q&A

解決済

1回答

6488閲覧

ミニバッチ学習とk分割交差検証を併用できるのか?

ruto844

総合スコア6

Keras

Kerasは、TheanoやTensorFlow/CNTK対応のラッパーライブラリです。DeepLearningの数学的部分を短いコードでネットワークとして表現することが可能。DeepLearningの最新手法を迅速に試すことができます。

機械学習

機械学習は、データからパターンを自動的に発見し、そこから知能的な判断を下すためのコンピューターアルゴリズムを指します。人工知能における課題のひとつです。

データマイニング

データマイニングは、購買履歴やクレジットカードの利用履歴、電話の通話履歴など企業にある大量のデータを解析して、その中に隠れたパターンやルールを探し出す技術です。DMと略されることもあります。

統計

統計は、集団現象を数量で把握することです。また、調査で得られた性質や傾向を数量的に表したデータのことをいいます。

0グッド

0クリップ

投稿2019/12/27 09:56

現在, 機械学習でデータの分類を行なっています.

ここで学習を行なっている段階で疑問となったことについてです.
現在、モデルに学習データをミニバッチ学習させています.

しかし, 知り合いからk分割交差検証の方が良いと言われました.

自分の中での認識としては...

<ミニバッチ学習>
1 epoch内で学習データ(1000枚)をバッチサイズ(10枚)で100回学習させること
だと思っています.

<k分割交差検証 k=10>
1 epoch内でデータ(1000枚)を10分割に分けて1セット(100枚)を検証データに.
残り9セット(900枚)を1epoch内で学習させること
だと思っています.

ミニバッチ学習とk分割交差検証の併用でできるのでしょうか?
上記の例でいうと, 10分割交差検証で分割したうちの9セット(900枚)に対して,さらに10枚ずつに分けてミニバッチ学習を行なっていくのでしょうか?
そして,最後に検証データ1セット(100枚)に対して検証を行う.

間違った認識をしているかもしれません.
回答宜しくお願いします.

使用環境: python (keras)

気になる質問をクリップする

クリップした質問は、後からいつでもMYページで確認できます。

またクリップした質問に回答があった際、通知やメールを受け取ることができます。

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

guest

回答1

0

ベストアンサー

ミニバッチ学習はNNの最適化の際のテクニックです。また、k分割交差検証はモデル評価の方法です。

全く違うレイヤのものなので、併用できるのかという質問自体に対してはイエス。その場合は質問文の「上記の例でいうと~」の方法でやります(当然それを10回やって、評価指標を計算する訳ですが)。

「ミニバッチ学習をk分割交差検証に置き換える」という文に意味があるかどうかという質問に対しては、ノー。知り合いの方と質問者さんの、互いにまたはどちらかに誤解があると思うので、よく確認してみてください。

なお、深層学習の学習は計算コストが高いので、そもそもk分割交差検証しない場合も多いと思います(ホールドアウト検証で済ませるなど。データは潤沢にある前提なので、それでも学習データとテストデータを十分な数用意できる)。

投稿2019/12/27 13:54

hayataka2049

総合スコア30935

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

あなたの回答

tips

太字

斜体

打ち消し線

見出し

引用テキストの挿入

コードの挿入

リンクの挿入

リストの挿入

番号リストの挿入

表の挿入

水平線の挿入

プレビュー

15分調べてもわからないことは
teratailで質問しよう!

ただいまの回答率
85.36%

質問をまとめることで
思考を整理して素早く解決

テンプレート機能で
簡単に質問をまとめる

質問する

関連した質問