jubaclassifier gender について

[咲希]

加藤です。


jubatus についての勉強しています。

jubaclassifier gender を起動したいですが上手く行きません。

jubaclassifier --configpath  --configpath /path/to/jubatus/share/jubatus/example/config/classifier/perceptron.json &を入力すると下記のエラーが出てきます。


[root@localhost shogun]# cd ..
[root@localhost jubatus-example-master]# ls
README.md               network_intrusion_detection  train_route
gender                  npb_similar_player           trivial_burst
iris                    rent                         trivial_stat
language_detection      shogun                       twitter_streaming_lang
malware_classification  slot                         twitter_streaming_location
movielens               test                         winequality
[root@localhost jubatus-example-master]#  cd gender
[root@localhost gender]# ls
README.rst  cpp  gender.json  java  python  ruby
[root@localhost gender]# gender
bash: gender: コマンドが見つかりませんでした...
[root@localhost gender]# jubaclassifier --configpath /path/to/jubatus/share/jubatus/example/config/classifier/perceptron.json &
[2] 30672
[root@localhost gender]# 2016-12-13 18:21:22,496 30672 FATAL [server_util.hpp:146] exception in main thread: Dynamic exception type: jubatus::core::common::exception::runtime_error::what: Failed to get realpath
    #0 [jubatus::core::common::exception::error_api_func_*] = realpath
    #0 [jubatus::core::common::exception::error_file_name_*] = /path/to/jubatus/share/jubatus/example/config/classifier/perceptron.json
    #0 [jubatus::core::common::exception::error_errno_*] = No such file or directory (2)
    #0 [jubatus::core::common::exception::error_at_file_*] = ../jubatus/server/common/filesystem.cpp
    #0 [jubatus::core::common::exception::error_at_line_*] = 67
    #0 [jubatus::core::common::exception::error_at_func_*] = std::string jubatus::server::common::real_path(const string&)

エラーが出ないようにどうすればよいでしょうか。

お手数をおかけしますが、ご回答を宜しくお願いいたします。

[Kenichi Maehashi]

加藤さま

Jubatus Team の前橋です。

--configpath オプションには、Jubatusサーバの設定ファイルのパスを指定します。
サンプルの--configpathは指定例ですので、環境に合わせて読み替えてください。

genderサンプルの場合は、genderディレクトリにあるgender.jsonを指定してください。

よろしくお願いいたします。

> --
> You received this message because you are subscribed to the Google Groups
> "Jubatus" group.
> To unsubscribe from this group and stop receiving emails from it, send an
> email to jubatus+u...@googlegroups.com.
> For more options, visit https://groups.google.com/d/optout.



--
Kenichi Maehashi @ Jubatus Team

[咲希]

前橋　様

教えて頂いて、ありがとうございました。

[咲希]

度々、すいません。

genderのプログラムを改造しましたが、下記のようにfemaleとmaleが出ないようにする方法ありますか。

プログラムの変更後、写真を載せています。gender.jsonと関係しているでしょうか。

実行の画面

[root@localhost python]# python ocho.py

female: -0.466667

Positive: 0.548655

Negative: 0.036522

male: -0.354240

female: -0.466667

Positive: -0.393080

Negative: 0.978257

male: -0.354240

お手数をおかけしますが、ご回答を宜しくお願いいたします。

 

[Kenichi Maehashi]

加藤さま

Jubatus Team の前橋です。

female/maleラベルのデータを学習した状態で、続けてPositive/Negativeラベルの学習を行うと、そのような状態になります。
別の学習モデルを構築したい場合は一旦学習モデルをクリアする必要があります。
学習モデルをクリアするには以下のいずれかを行ってください。

1) clear RPCを実行する。

>>> client.clear()

2) サーバプロセス(jubaclassifier)を再起動する。

よろしくお願い致します。

2016年12月23日 16:56 咲希 <chah...@gmail.com>:

--
You received this message because you are subscribed to the Google Groups "Jubatus" group.

To unsubscribe from this group and stop receiving emails from it, send an email to jubatus+unsubscribe@googlegroups.com.

For more options, visit https://groups.google.com/d/optout.

[咲希]

ご返事ありがとうございました。

初心者な質問で申し訳ないですが、どのように client.clear()を使えますか。

下記のように実行しましたが、female/maleが消えません。

[root@localhost jubatus-example-master]# cd gender

[root@localhost gender]# cd python

[root@localhost python]# ls

ocho.py

[root@localhost python]# client.clear()

> 

> ocho.py

bash: 予期しないトークン `ocho.py' 周辺に構文エラーがあります

[root@localhost python]# client.clear (ocho.py)

bash: 予期しないトークン `ocho.py' 周辺に構文エラーがあります

[root@localhost python]# client.clear ocho.py

bash: client.clear: コマンドが見つかりませんでした...

[root@localhost python]# python ocho.py

female: -0.466667

Positive: 0.759173

Negative: -0.176775

male: -0.390293

female: -0.466667

Positive: -0.198241

Negative: 0.780639

male: -0.390293

[root@localhost python]# 

サーバーの再起動

[root@localhost python]#  jubaclassifier --configpath /usr/share/jubatus/example/config/classifier/perceptron.json &

[1] 29377

[root@localhost python]# 2016-12-27 13:41:38,074 29377 INFO  [server_util.cpp:429] starting jubaclassifier 1.0.0 RPC server at 10.2.82.204:9199

    pid                  : 29377

    user                 : root

    mode                 : standalone mode

    timeout              : 10

    thread               : 2

    datadir              : /tmp

    logdir               : 

    log config           : 

    zookeeper            : 

    name                 : 

    interval sec         : 16

    interval count       : 512

    zookeeper timeout    : 10

    interconnect timeout : 10

2016-12-27 13:41:38,075 29377 INFO  [server_util.cpp:165] load config from local file: /usr/share/jubatus/example/config/classifier/perceptron.json

2016-12-27 13:41:38,075 29377 INFO  [classifier_serv.cpp:115] config loaded: {

  "converter" : {

    "string_filter_types" : {},

    "string_filter_rules" : [],

    "num_filter_types" : {},

    "num_filter_rules" : [],

    "string_types" : {},

    "string_rules" : [

      { "key" : "*", "type" : "str", "sample_weight" : "bin", "global_weight" : "bin" }

    ],

    "num_types" : {},

    "num_rules" : [

      { "key" : "*", "type" : "num" }

    ]

  },

  "method" : "perceptron"

}

2016-12-27 13:41:38,076 29377 FATAL [server_helper.hpp:251] server failed to start: any process using port 9199?

[root@localhost python]#  jubaclassifier --configpath /usr/share/jubatus/example/config/classifier/perceptron.json &

[2] 29516

[1]   中止                  (コアダンプ) jubaclassifier --configpath /usr/share/jubatus/example/config/classifier/perceptron.json

[root@localhost python]# 2016-12-27 13:51:54,948 29516 INFO  [server_util.cpp:429] starting jubaclassifier 1.0.0 RPC server at 10.2.82.204:9199

    pid                  : 29516

    user                 : root

    mode                 : standalone mode

    timeout              : 10

    thread               : 2

    datadir              : /tmp

    logdir               : 

    log config           : 

    zookeeper            : 

    name                 : 

    interval sec         : 16

    interval count       : 512

    zookeeper timeout    : 10

    interconnect timeout : 10

2016-12-27 13:51:54,949 29516 INFO  [server_util.cpp:165] load config from local file: /usr/share/jubatus/example/config/classifier/perceptron.json

2016-12-27 13:51:54,950 29516 INFO  [classifier_serv.cpp:115] config loaded: {

  "converter" : {

    "string_filter_types" : {},

    "string_filter_rules" : [],

    "num_filter_types" : {},

    "num_filter_rules" : [],

    "string_types" : {},

    "string_rules" : [

      { "key" : "*", "type" : "str", "sample_weight" : "bin", "global_weight" : "bin" }

    ],

    "num_types" : {},

    "num_rules" : [

      { "key" : "*", "type" : "num" }

    ]

  },

  "method" : "perceptron"

}

2016-12-27 13:51:54,950 29516 FATAL [server_helper.hpp:251] server failed to start: any process using port 9199?

お手数ですが、ご返事をいただければ幸いです。

[Kenichi Maehashi]

加藤さま

Jubatus Team の前橋です。

> どのように client.clear()を使えますか。

以下のようにコードに client.clear() を追加してください。

>> client = jubatus.Classifier(host, port, name)
>> client.clear()

よろしくお願い致します。

> --
> You received this message because you are subscribed to the Google Groups
> "Jubatus" group.
> To unsubscribe from this group and stop receiving emails from it, send an

> email to jubatus+u...@googlegroups.com.

[咲希]

ご回答ありがとうございました。