質問をすることでしか得られない、回答やアドバイスがある。

15分調べてもわからないことは、質問しよう!

新規登録して質問してみよう
ただいま回答率
85.48%
DataSet

DataSetは、ADO.NETアーキテクチャのコンポーネントです。データベースから取得したレコードをメモリ領域に格納するクラスを指します。データの保持やテーブル間のリレーション・制約といった保持も可能です。

Chainer

Chainerは、国産の深層学習フレームワークです。あらゆるニューラルネットワークをPythonで柔軟に書くことができ、学習させることが可能。GPUをサポートしており、複数のGPUを用いた学習も直感的に記述できます。

Python

Pythonは、コードの読みやすさが特徴的なプログラミング言語の1つです。 強い型付け、動的型付けに対応しており、後方互換性がないバージョン2系とバージョン3系が使用されています。 商用製品の開発にも無料で使用でき、OSだけでなく仮想環境にも対応。Unicodeによる文字列操作をサポートしているため、日本語処理も標準で可能です。

Q&A

解決済

1回答

2986閲覧

CNNで学習するデータセットの作り方

155ccmm

総合スコア12

DataSet

DataSetは、ADO.NETアーキテクチャのコンポーネントです。データベースから取得したレコードをメモリ領域に格納するクラスを指します。データの保持やテーブル間のリレーション・制約といった保持も可能です。

Chainer

Chainerは、国産の深層学習フレームワークです。あらゆるニューラルネットワークをPythonで柔軟に書くことができ、学習させることが可能。GPUをサポートしており、複数のGPUを用いた学習も直感的に記述できます。

Python

Pythonは、コードの読みやすさが特徴的なプログラミング言語の1つです。 強い型付け、動的型付けに対応しており、後方互換性がないバージョン2系とバージョン3系が使用されています。 商用製品の開発にも無料で使用でき、OSだけでなく仮想環境にも対応。Unicodeによる文字列操作をサポートしているため、日本語処理も標準で可能です。

0グッド

0クリップ

投稿2019/01/12 11:06

編集2019/01/15 05:20

前提・実現したいこと

CNNで学習するデータセットを作りたいです。
自分の作成した画像をデータセットとして用いて、MNISTの学習プログラムを元に学習を行いたいと考えています。
現在(https://www.kumilog.net/entry/chainer-dataset#f-822af890)に書かれてある
LabeledImageDatasetの方法(画像ファイルのパスとラベルが書かれたファイルを指定する方法)を参考に
データセットを作ろうとしています。

学習データとして用いたい画像は、
C:/Users/me/PycharmProjects/project/dataset/pic/1
C:/Users/me/PycharmProjects/project/dataset/pic/2
C:/Users/me/PycharmProjects/project/dataset/pic/3
の中に.pngで保存しています。

また、dataset.pyと同じディレクトリにimages.txtをおいています。

images.txtの中身は以下の通りです。
./dataset/pic/1/2.png 1
./dataset/pic/1/3.png 1
./dataset/pic/1/4.png 1
./dataset/pic/1/5.png 1
./dataset/pic/1/6.png 1
./dataset/pic/2/2.png 2
./dataset/pic/2/3.png 2
./dataset/pic/2/4.png 2
./dataset/pic/2/5.png 2
./dataset/pic/2/6.png 2
./dataset/pic/3/41.png 3
./dataset/pic/3/42.png 3
./dataset/pic/3/43.png 3
./dataset/pic/3/44.png 3
./dataset/pic/3/445.png 3

発生しているエラーの解消と、detasetがちゃんとできているかの
確認をする方法はありますでしょうか。
わかりにくい部分がありましたら、遠慮なくお願いします。

■■な機能を実装中に以下のエラーメッセージが発生しました。

発生している問題・エラーメッセージ

C:\Users\me\Anaconda3\python.exe C:/Users/me/PycharmProjects/project/dataset.py Traceback (most recent call last): File "C:/Users/me/PycharmProjects/project/dataset.py", line 9, in <module> dataset = chainer.datasets.LabeledImageDataset(image_files) File "C:\Users\me\Anaconda3\lib\site-packages\chainer\datasets\image_dataset.py", line 137, in __init__ i, pairs_path)) ValueError: invalid format at line 15 in file images.txt

該当のソースコード

python

1#!/usr/bin/env python 2# -*- coding: utf-8 -*- 3import chainer 4 5image_files ='images.txt' 6dataset = chainer.datasets.LabeledImageDataset(image_files)

試したこと

補足情報(FW/ツールのバージョンなど)

ここにより詳細な情報を記載してください。

気になる質問をクリップする

クリップした質問は、後からいつでもMYページで確認できます。

またクリップした質問に回答があった際、通知やメールを受け取ることができます。

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

guest

回答1

0

ベストアンサー

タグに「chainer」を追加してください。
発生しているエラーは「image.txt の15行目のフォーマットが受け付けられない」です。15行目を確認しましょう。スペースであるべきところがタブであるとか、スペースがない、空行である、といった間違いがあると思われます。

「ちゃんと」を定義してください。
「エラーが発生しない」のもちゃんとしています。そもそも、今回は image.txt の書き間違いと思われますので、dataset はちゃんとできると思われます。
画像とラベルが一致しているというのも「ちゃんと」ですが、その場合はラベルごとに画像ファイルの保存場所をフォルダー分けすれば、確認が容易になります。そして、image.txt ファイルを作るのはスクリプトで行えば、付け間違えの恐れは小さくなります。

投稿2019/01/14 00:23

Q71

総合スコア995

バッドをするには、ログインかつ

こちらの条件を満たす必要があります。

155ccmm

2019/01/15 05:30

回答ありがとうございます。 images.txtに15行目以降に空行を消去すると、datasetをを作ることができました。 images.txなどのtファイルの作成は、今後スクリプトで行います。
guest

あなたの回答

tips

太字

斜体

打ち消し線

見出し

引用テキストの挿入

コードの挿入

リンクの挿入

リストの挿入

番号リストの挿入

表の挿入

水平線の挿入

プレビュー

15分調べてもわからないことは
teratailで質問しよう!

ただいまの回答率
85.48%

質問をまとめることで
思考を整理して素早く解決

テンプレート機能で
簡単に質問をまとめる

質問する

関連した質問