Fashion-MNIST のデータセット

461 views
Skip to first unread message

TETSUO TSURU

unread,
Jun 9, 2018, 8:21:32 PM6/9/18
to Neural Network Console Users (JP)

▼下記のサイトを参考に

http://cedro3.com/ai/fashion-mnist/


Fashion-MNIST のデータセットを

ダウンロードしてNNCで動かそうとしています.


参考サイトに書いてあるとおりに

create_mnist_csv.pyをANACONDAから動かして

結構な時間がかかってダウンドードしていました.


しかし,mnist_test.csvなどのCSVファイルはいくつか作られたのですが

画像のフォルダもなく,画像データやラベルデータも作成されませんでした.


train-images-idx3-ubyte.gz


などから,NNCで動くデータセットを作成する方法を

教えていただけませんでしょうか.


よろしくお願いいたします.


添付画像は,Fashion-MNISTのgitサイトです.

https://github.com/zalandoresearch/fashion-mnist



小林由幸

unread,
Jun 12, 2018, 9:49:26 PM6/12/18
to Neural Network Console Users (JP)
Python環境については、Neural Network Consoleに同梱されたPython環境を利用することができます。
以下、ダウンロードの手順です。

1. コマンドプロンプトを起動し、以下のようにしてパスを追加します

SET PATH=%PATH%;C:\neural_network_console\libs\Miniconda3;C:\neural_network_console\libs\Miniconda3\Scripts
SET HOME
=C:\neural_network_console\settings

※C:\neural_network_consoleの箇所はインストールされたフォルダに応じて書き換えてください。
※SET PATHを用いて追加したパスは本コマンドを実行したコマンドプロンプト内でのみ有効で、環境変数には影響しません。
※プロキシ環境下である場合はさらにプロキシサーバの設定が必要な場合があります(urlopen errorが発生する場合)。


2. 以下にあるダウンロードデータのキャッシュファイルを削除します

C:\neural_network_console\settings\nnabla_data

既にMNISTデータセットがダウンロードされている場合、上記フォルダ内にあるMNISTのキャッシュが再利用されてしまい、
Fashion-MNISTをダウンロードしたはずが数字の画像になってしまう可能性があります。
こちらのフォルダ内のファイルはすべてキャッシュですので削除しても問題ありません。


3. 修正したcreate_mnist_dataset_csv.pyの置かれているパスに移動します
ここでは、MNISTフォルダとは別のFashionMNISTフォルダを作成し、そこにcreate_mnist_dataset_csv.pyを配置しました。
cd C:\neural_network_console\samples\sample_dataset\FashionMNIST

4. create_mnist_dataset_csv.pyを実行します
python create_mnist_dataset_csv.py

3のフォルダ内にtraining、valiationの2つのフォルダに格納された画像とデータセットCSVファイルが作成されていれば成功です。
DATASETタブのOpen Datasetボタンから作成されたCSVファイルを指定して読み込み、ご利用ください。

TETSUO TSURU

unread,
Jun 15, 2018, 9:43:34 AM6/15/18
to Neural Network Console Users (JP)
小林様

指示通りに、1〜4までを実行した結果
Fashion-MNISTのデータセットを作成することが出来ました。
現在、Fashion-MNISTのデータセットを使って動かしています。

ありがとございました。
--




2018年6月13日水曜日 10時49分26秒 UTC+9 小林由幸:
Reply all
Reply to author
Forward
0 new messages