Groups
Sign in
Groups
Asakusa Frameworkメーリングリスト
Conversations
About
Send feedback
Help
Asakusa Frameworkメーリングリスト
Contact owners and managers
1–30 of 41
Mark all as read
Report group
0 selected
ハピタン
,
KAWAGUCHI, Akira
4
9/24/17
Yaessログの警告について
かわぐちです。 > Asakusa側も何度か再配置しているのですがどこかにゴミ?が残っているのでしょうか。 メールに記載の情報のみだとなんとも言えないのですが、 どこかにゴミが残っていることで
unread,
Yaessログの警告について
かわぐちです。 > Asakusa側も何度か再配置しているのですがどこかにゴミ?が残っているのでしょうか。 メールに記載の情報のみだとなんとも言えないのですが、 どこかにゴミが残っていることで
9/24/17
ハピタン
,
KAWAGUCHI, Akira
4
8/31/17
ログの出力について
かわぐちです。 参考になるかはわかりませんが、 Report APIの実装は設定によって変更することが可能です。 以下ドキュメントです。 http://docs.asakusafw.com/latest
unread,
ログの出力について
かわぐちです。 参考になるかはわかりませんが、 Report APIの実装は設定によって変更することが可能です。 以下ドキュメントです。 http://docs.asakusafw.com/latest
8/31/17
koshiro
,
中田明
2
2/16/16
Asakusa Frameworkでの画像処理
小城様 お問い合わせありがとうございます。 別途、ご連絡させて頂きます。 取り急ぎ、ご返信まで。 ノーチラス 中田 2016年2月17日水曜日、koshiro<koshiro@develop.
unread,
Asakusa Frameworkでの画像処理
小城様 お問い合わせありがとうございます。 別途、ご連絡させて頂きます。 取り急ぎ、ご返信まで。 ノーチラス 中田 2016年2月17日水曜日、koshiro<koshiro@develop.
2/16/16
Nakata Atsushi
,
KAWAGUCHI, Akira
3
8/23/15
DirectI/Oを使用した分散処理モードでの設定について
かわぐち様 中田です。 アドバイス頂き、ありがとうございます。 その後、Hadoopの設定やHadoopコマンド等見直したのですが、 原因となるような箇所が発見できず、 hdfs://master:
unread,
DirectI/Oを使用した分散処理モードでの設定について
かわぐち様 中田です。 アドバイス頂き、ありがとうございます。 その後、Hadoopの設定やHadoopコマンド等見直したのですが、 原因となるような箇所が発見できず、 hdfs://master:
8/23/15
小原恒夫
,
KAWAGUCHI, Akira
3
1/15/15
Amazon S3 へのアクセスが制限されている環境での、プロジェクトテンプレートからの新規プロジェクトの作成について
かわぐち さま 丁寧なご解説、誠にありがとうございます。 大変勉強になりました。 お示しいただいた方法を参考に、自身の環境での次善策を検討してみます。 この度は、ご回答くださりありがとうございました。
unread,
Amazon S3 へのアクセスが制限されている環境での、プロジェクトテンプレートからの新規プロジェクトの作成について
かわぐち さま 丁寧なご解説、誠にありがとうございます。 大変勉強になりました。 お示しいただいた方法を参考に、自身の環境での次善策を検討してみます。 この度は、ご回答くださりありがとうございました。
1/15/15
中島賢弘
11/20/14
Error:java heap space
お世話になっております。中島です。 Hadoop上で実データを投入し、Asakusaバッチを実行した所、 Hadoopにて「Error:java heap space」が発生。 Hadoop(MapR)
unread,
Error:java heap space
お世話になっております。中島です。 Hadoop上で実データを投入し、Asakusaバッチを実行した所、 Hadoopにて「Error:java heap space」が発生。 Hadoop(MapR)
11/20/14
teppei tosa
,
KAWAGUCHI, Akira
5
10/15/14
[0.7.0]プロジェクト作成で失敗
かわぐちです。 この問題をShafu側の修正で回避することができたので、 この修正が入ったものを Shafu 0.3.2 として先ほどリリースしました。 このバージョンのShafuを使うことで、 先述の
unread,
[0.7.0]プロジェクト作成で失敗
かわぐちです。 この問題をShafu側の修正で回避することができたので、 この修正が入ったものを Shafu 0.3.2 として先ほどリリースしました。 このバージョンのShafuを使うことで、 先述の
10/15/14
teppei tosa
,
satoruf
2
4/8/14
「Asakusa Framework 勉強会 2014春」開催のお知らせ
勉強会で発表したスライドを下記にアップしました。 「JobSchedulerを使ったAsakusaのジョブ管理」 http://www.slideshare.net/sfunai/
unread,
「Asakusa Framework 勉強会 2014春」開催のお知らせ
勉強会で発表したスライドを下記にアップしました。 「JobSchedulerを使ったAsakusaのジョブ管理」 http://www.slideshare.net/sfunai/
4/8/14
teppei tosa
12/14/13
「Asakusa Framework 勉強会 2014 冬」開催のお知らせ
こんにちわ。土佐です。 「Asakusa Framework 勉強会 2014 冬」を開催しますので、お知らせ致します。 日時:2014年1月29日(水)19:00〜21:00 場所:日立
unread,
「Asakusa Framework 勉強会 2014 冬」開催のお知らせ
こんにちわ。土佐です。 「Asakusa Framework 勉強会 2014 冬」を開催しますので、お知らせ致します。 日時:2014年1月29日(水)19:00〜21:00 場所:日立
12/14/13
ico
,
菱田真人
3
11/27/13
複数レコードを1レコードにまとめる方法について
ひしだまさま まさにやりたいことはこれでした。 参考ページ、とても解りやすいです。 今後の開発の参考にさせていただきたいと思います。 この度はご回答ありがとうございました。 2013年11月26日火曜日
unread,
複数レコードを1レコードにまとめる方法について
ひしだまさま まさにやりたいことはこれでした。 参考ページ、とても解りやすいです。 今後の開発の参考にさせていただきたいと思います。 この度はご回答ありがとうございました。 2013年11月26日火曜日
11/27/13
ico
,
KAWAGUCHI, Akira
3
11/21/13
asakusaFWを用いたバッチの実装について
かわぐち様 ご返信ありがとうございます。 BatchDescription#describeは ジョブフロー間の関係を記述する用途にのみ使用できます。 やはりそうなのですね。 Javaライクな書き方の
unread,
asakusaFWを用いたバッチの実装について
かわぐち様 ご返信ありがとうございます。 BatchDescription#describeは ジョブフロー間の関係を記述する用途にのみ使用できます。 やはりそうなのですね。 Javaライクな書き方の
11/21/13
koji zenko
,
KAWAGUCHI, Akira
4
9/26/13
FlowPartTesterでのエラー
かわぐちさん zenkoです。 ご回答ありがとうございます。 まさに、以下環境でした。 >手元では、開発環境にインストールしたAsakusa Frameworkのバージョンが 0.5.0 ,
unread,
FlowPartTesterでのエラー
かわぐちさん zenkoです。 ご回答ありがとうございます。 まさに、以下環境でした。 >手元では、開発環境にインストールしたAsakusa Frameworkのバージョンが 0.5.0 ,
9/26/13
sugimoto
,
古山慎悟
3
7/3/13
DMDLを使った外部結合的な表現
古山慎吾様 回答ありがとうございます。 確認できました。 同じ観点ですが、 outer join(left,right,full)を実現するには、結合演算子の左辺右辺の入れ替えで実現するイメージでしょ
unread,
DMDLを使った外部結合的な表現
古山慎吾様 回答ありがとうございます。 確認できました。 同じ観点ですが、 outer join(left,right,full)を実現するには、結合演算子の左辺右辺の入れ替えで実現するイメージでしょ
7/3/13
神谷実花
, …
sugimoto
7
7/2/13
DirectI/Oを使用したamazon S3からの入出力設定について
sugimotoです すみません、当方では EMRでのみ稼動確認できています。 ※参考までですが、EC2をお使いの用途は分かりませんが、 EMRではバッチ終了後も起動状態を維持し続けることもできます。
unread,
DirectI/Oを使用したamazon S3からの入出力設定について
sugimotoです すみません、当方では EMRでのみ稼動確認できています。 ※参考までですが、EC2をお使いの用途は分かりませんが、 EMRではバッチ終了後も起動状態を維持し続けることもできます。
7/2/13
Kaneko Takehiro
6/25/13
WindGateでリモートHadoopにアクセスする際の設定について
金子と申します。 よろしくお願いします。 WindGateでリモートHadoop環境にSSHアクセスするパターンですが、 ドキュメントに「接続元でもHadoopの設定が必要」とあります。 具体的に
unread,
WindGateでリモートHadoopにアクセスする際の設定について
金子と申します。 よろしくお願いします。 WindGateでリモートHadoop環境にSSHアクセスするパターンですが、 ドキュメントに「接続元でもHadoopの設定が必要」とあります。 具体的に
6/25/13
kaneko takehiro
,
hishidama
3
6/19/13
DMDLコンパイルエラーのデバッグ方法
さっそくインストールさせていただきました。 とっても便利で使いやすいです! ありがとうございます。 2013年6月19日水曜日 14時35分47秒 UTC+9 kaneko takehiro: 金子と
unread,
DMDLコンパイルエラーのデバッグ方法
さっそくインストールさせていただきました。 とっても便利で使いやすいです! ありがとうございます。 2013年6月19日水曜日 14時35分47秒 UTC+9 kaneko takehiro: 金子と
6/19/13
kaneko takehiro
,
田中修
6
6/19/13
eclipse設定ファイル作成時のエラーについて
プロキシフリーな環境で試したところ、 何も問題なく動きました。 現在順調に検証中です。 ありがとうございました。 2013年6月11日火曜日 9時46分09秒 UTC+9 kaneko takehiro
unread,
eclipse設定ファイル作成時のエラーについて
プロキシフリーな環境で試したところ、 何も問題なく動きました。 現在順調に検証中です。 ありがとうございました。 2013年6月11日火曜日 9時46分09秒 UTC+9 kaneko takehiro
6/19/13
tomoa...@gmail.com
,
KAWAGUCHI, Akira
3
6/16/13
プロジェクトディレクトリ準備中のエラーについて
浅利です。返信遅くなり申し訳ありません。 ご教示ありがとうございます。ただいま、自環境の再構築中なので、 準備が出来次第、再挑戦してみます。 ありがとうございました。 アーキタイプカタログファイルの指定
unread,
プロジェクトディレクトリ準備中のエラーについて
浅利です。返信遅くなり申し訳ありません。 ご教示ありがとうございます。ただいま、自環境の再構築中なので、 準備が出来次第、再挑戦してみます。 ありがとうございました。 アーキタイプカタログファイルの指定
6/16/13
田中修
2
5/23/13
com.asakusafw.runtime.io.csv.CsvFormatException: TOO_LONG_RECORDが出てしまいます。
田中修です。 自己解答いたします。 TOO_LONG_RECORDのエラー原因がわかりました。 CSVのデータ項目がDMDLファイルのデータ項目の数を上回った場合 項目が足りないという表示を出している
unread,
com.asakusafw.runtime.io.csv.CsvFormatException: TOO_LONG_RECORDが出てしまいます。
田中修です。 自己解答いたします。 TOO_LONG_RECORDのエラー原因がわかりました。 CSVのデータ項目がDMDLファイルのデータ項目の数を上回った場合 項目が足りないという表示を出している
5/23/13
sugimoto
,
田中修
3
5/22/13
EMRでの動作
田中修 様 ありがとうございます 助かります 指定頂いた、AMI2.3.5で動作確認させてみます。 ありがとうございます。 2013年5月23日木曜日 8時47分23秒 UTC+9 田中修:
unread,
EMRでの動作
田中修 様 ありがとうございます 助かります 指定頂いた、AMI2.3.5で動作確認させてみます。 ありがとうございます。 2013年5月23日木曜日 8時47分23秒 UTC+9 田中修:
5/22/13
田中修
,
KAWAGUCHI, Akira
6
5/14/13
Flowpartのテストロジックにてエラー「Java heap space」
かわぐち様 度々お騒がせしております。 田中修です。 メモリをMAX3GBに変更したところ、JavaHeapSpaceが改善されました。 <plugin> <groupId>
unread,
Flowpartのテストロジックにてエラー「Java heap space」
かわぐち様 度々お騒がせしております。 田中修です。 メモリをMAX3GBに変更したところ、JavaHeapSpaceが改善されました。 <plugin> <groupId>
5/14/13
田中修
,
KAWAGUCHI, Akira
2
5/14/13
OSがWindowsの環境下でのasakusa framework 0.5.0のビルドエラー
かわぐちです。 > これは何のために追加されたのでしょうか? DMDLのコンパイラプラグインを配置するための 追加ディレクトリです。 バージョン0.5.0から追加されましたが、 現時点ではこれを
unread,
OSがWindowsの環境下でのasakusa framework 0.5.0のビルドエラー
かわぐちです。 > これは何のために追加されたのでしょうか? DMDLのコンパイラプラグインを配置するための 追加ディレクトリです。 バージョン0.5.0から追加されましたが、 現時点ではこれを
5/14/13
田中修
2
5/11/13
Jobflow/BatchのTestロジックの実行エラー「variable "date" is not defined in the variable table」
度々お騒がせしております。 田中修です。 自己解決いたしましたのでご連絡いたします。 どこの部分を修正するとこのエラーが出るのかが分かりました。 しかし、エラーが解決しておりません。 今回のエラーの原因
unread,
Jobflow/BatchのTestロジックの実行エラー「variable "date" is not defined in the variable table」
度々お騒がせしております。 田中修です。 自己解決いたしましたのでご連絡いたします。 どこの部分を修正するとこのエラーが出るのかが分かりました。 しかし、エラーが解決しておりません。 今回のエラーの原因
5/11/13
teppei tosa
,
古山慎悟
2
5/7/13
結合キーを伴わない結合をする際のDSL記述方法について
土佐さん、 タイトルと例示から意図を察した範囲でですが、 やりたいことは結合ではなくデータの合流ではないかと思います。 合流を行う際には合流させるデータすべてについて同一の型である必要があるので、 変換
unread,
結合キーを伴わない結合をする際のDSL記述方法について
土佐さん、 タイトルと例示から意図を察した範囲でですが、 やりたいことは結合ではなくデータの合流ではないかと思います。 合流を行う際には合流させるデータすべてについて同一の型である必要があるので、 変換
5/7/13
田中修
,
KAWAGUCHI, Akira
3
5/6/13
AsakusaFWのテストロジックについて
かわぐち様 ご連絡ありがとうございます。 ルール定義の使い方がいまいち不明なのですが Excelを使いたくないのでCSVをそのまま利用したいので Javaでできるとありがたいです。 ご連絡ありがとう
unread,
AsakusaFWのテストロジックについて
かわぐち様 ご連絡ありがとうございます。 ルール定義の使い方がいまいち不明なのですが Excelを使いたくないのでCSVをそのまま利用したいので Javaでできるとありがたいです。 ご連絡ありがとう
5/6/13
teppei tosa
,
KAWAGUCHI, Akira
3
5/6/13
yaess-batch.sh の実行時に yaess-script.properties の java.io.FileNotFoundException
なるほど。手順を見逃していました。 問題なく、バッチを実行することができました。 ありがとうございました。 2013年5月5日日曜日 13時32分16秒 UTC+9 KAWAGUCHI, Akira:
unread,
yaess-batch.sh の実行時に yaess-script.properties の java.io.FileNotFoundException
なるほど。手順を見逃していました。 問題なく、バッチを実行することができました。 ありがとうございました。 2013年5月5日日曜日 13時32分16秒 UTC+9 KAWAGUCHI, Akira:
5/6/13
田中修
,
古山慎悟
4
5/2/13
「出力が別 の入力を上書きします」というコンパイルエラー
古山様 ありがとうございます。 出力のみの制約ということなのでしょうか? サイトを読みましたが理解出来ませんでした。 私がHadoopを理解していないのがそもそもの原因かもしれません。 情報提供
unread,
「出力が別 の入力を上書きします」というコンパイルエラー
古山様 ありがとうございます。 出力のみの制約ということなのでしょうか? サイトを読みましたが理解出来ませんでした。 私がHadoopを理解していないのがそもそもの原因かもしれません。 情報提供
5/2/13
ペガス
,
古山慎悟
3
3/18/13
マスタデータをあらかじめHDFSに配置する方法について
古山さんお世話になっております、ぺガスです。 教えて頂いたリンクを拝見いたしました。 どうやら、AsakusaFrameworkにはHDFSを直接利用する機能があるようですね。 基本的なことを質問して
unread,
マスタデータをあらかじめHDFSに配置する方法について
古山さんお世話になっております、ぺガスです。 教えて頂いたリンクを拝見いたしました。 どうやら、AsakusaFrameworkにはHDFSを直接利用する機能があるようですね。 基本的なことを質問して
3/18/13
mobarex
,
古山慎悟
4
2/6/13
処理したレコード件数の取得方法について
mobarexさん、 このカウンターは、演算子クラスのメソッド内から参照できないでしょうか? 残念ながらできません。 演算子メソッドはMapReduce Jobの実行順序を意識することができるレイヤでは
unread,
処理したレコード件数の取得方法について
mobarexさん、 このカウンターは、演算子クラスのメソッド内から参照できないでしょうか? 残念ながらできません。 演算子メソッドはMapReduce Jobの実行順序を意識することができるレイヤでは
2/6/13
ペガス
,
KAWAGUCHI, Akira
3
1/22/13
DATETIME型で集約関数max、minは使えるのか
かわぐちさん、ご指導ありがとうございます。 確かに集計レコード中にNULLデータがありましたので、 それを除去するようなロジックを組み込んでみます。 2013年1月22日火曜日 20時33分23秒
unread,
DATETIME型で集約関数max、minは使えるのか
かわぐちさん、ご指導ありがとうございます。 確かに集計レコード中にNULLデータがありましたので、 それを除去するようなロジックを組み込んでみます。 2013年1月22日火曜日 20時33分23秒
1/22/13