CIFAR10の画像Dataの生成について

271 views
Skip to first unread message

Nao

unread,
Jan 10, 2018, 8:02:50 PM1/10/18
to Neural Network Console Users (JP)
neural network consoleに付属されている”create_cifar10_csv.py”を実行したところ、
DataIteratorで画像生成が行われません。(0%で処理が終了する)

改善方法を教えていただけますでしょうか?

E:\Tool\neural_network_console_110\samples\sample_dataset\CIFAR10>python create_cifar10_csv.py
2018-01-11 09:27:18,326 [nnabla][INFO]: Initializing CPU extension...
2018-01-11 09:27:18,841 [nnabla][Level 99]: Downloading CIFAR-10 dataset...
2018-01-11 09:27:18,841 [nnabla][Level 99]: Creating "cifar10_training.csv"...
2018-01-11 09:27:18,841 [nnabla][INFO]: DataSource with shuffle(False)
2018-01-11 09:27:18,846 [nnabla][INFO]: Getting labeled data from https://www.cs.toronto.edu/~kriz/cifar-10-python.tar.gz.
cifar-10-python.tar.gz: 100%|█████████████████████████████████████████████████████████████████████| 170498071/170498071 [00:54<00:00, 2474978.72it/s]
2018-01-11 09:28:24,415 [nnabla][INFO]: Getting labeled data from https://www.cs.toronto.edu/~kriz/cifar-10-python.tar.gz.
2018-01-11 09:28:24,435 [nnabla][INFO]: Using DataIterator
  0%|                                                                                                                  | 0/50000 [00:00<?, ?images/s]
2018-01-11 09:28:24,505 [nnabla][Level 99]: Creating "cifar10_test.csv"...
2018-01-11 09:28:24,530 [nnabla][INFO]: DataSource with shuffle(False)
2018-01-11 09:28:24,550 [nnabla][INFO]: Getting labeled data from https://www.cs.toronto.edu/~kriz/cifar-10-python.tar.gz.
2018-01-11 09:28:24,580 [nnabla][INFO]: > C:\Users\n.yokota/nnabla_data\cifar-10-python.tar.gz in cache.
2018-01-11 09:28:24,590 [nnabla][INFO]: > If you have any issue when using this file,
2018-01-11 09:28:24,590 [nnabla][INFO]: > manually remove the file and try download again.
2018-01-11 09:28:26,460 [nnabla][INFO]: Getting labeled data from https://www.cs.toronto.edu/~kriz/cifar-10-python.tar.gz.
2018-01-11 09:28:26,460 [nnabla][INFO]: Using DataIterator
  0%|                                                                                                                  | 0/10000 [00:00<?, ?images/s]
2018-01-11 09:28:26,500 [nnabla][Level 99]: Dataset Creation Completed.

E:\Tool\neural_network_console_110\samples\sample_dataset\CIFAR10>

Yoshii Takanobu

unread,
Jan 12, 2018, 6:22:22 AM1/12/18
to Neural Network Console Users (JP)
私もまったく同じ現象で悩んでいます。
annacondaで仮想環境を作成し、Python 3.6, 3.5, 2.7のそれぞれで試していますが駄目でした。
初心者ゆえの悩みであろうかとは思いますが、情報提供をよろしくおねがいいたします。

小林由幸

unread,
Jan 15, 2018, 4:16:37 AM1/15/18
to Neural Network Console Users (JP)
logistic_regressionサンプルプロジェクト等を参考に、CONFIGタブのProject descriptionに
以下のテキストを記入し、再度プロジェクトを読み込んでください。

dataset-require=CIFAR10

プロジェクト読み込み時にCIFAR10のダウンロードの確認メッセージが表示され、
CIFAR10データセットのダウンロードを行うことができます。


ダウンロードが完了したら、DATASETタブにて
\samples\sample_dataset\CIFAR10\
に作成されたCIFAR10のデータセットを読み込みます。

Yoshii Takanobu

unread,
Jan 15, 2018, 6:54:27 AM1/15/18
to Neural Network Console Users (JP)
小林様

アドバイスありがとうございます。
小生はCIFAR10 CIFAR100ともにデータセットを作成できました。
取り急ぎ御礼申し上げます。


2018年1月15日月曜日 18時16分37秒 UTC+9 小林由幸:

Nao

unread,
Jan 16, 2018, 7:52:12 PM1/16/18
to Neural Network Console Users (JP)
小林様

CIFARのデータセットが作成できました。
ありがとうございました。
Reply all
Reply to author
Forward
0 new messages