Groups
Conversations
All groups and messages
Send feedback to Google
Help
Training
Sign in
Groups
Asakusa Frameworkメーリングリスト
Conversations
About
Asakusa Frameworkメーリングリスト
Contact owners and managers
1–30 of 41
Mark all as read
Report group
0 selected
ハピタン
,
KAWAGUCHI, Akira
4
9/24/17
Yaessログの警告について
かわぐちです。 > Asakusa側も何度か再配置しているのですがどこかにゴミ?が残っているのでしょうか。 メールに記載の情報のみだとなんとも言えないのですが、 どこかにゴミが残っていることで
unread,
Yaessログの警告について
かわぐちです。 > Asakusa側も何度か再配置しているのですがどこかにゴミ?が残っているのでしょうか。 メールに記載の情報のみだとなんとも言えないのですが、 どこかにゴミが残っていることで
9/24/17
ハピタン
,
KAWAGUCHI, Akira
4
8/31/17
ログの出力について
かわぐちです。 参考になるかはわかりませんが、 Report APIの実装は設定によって変更することが可能です。 以下ドキュメントです。 http://docs.asakusafw.com/latest
unread,
ログの出力について
かわぐちです。 参考になるかはわかりませんが、 Report APIの実装は設定によって変更することが可能です。 以下ドキュメントです。 http://docs.asakusafw.com/latest
8/31/17
koshiro
,
中田明
2
2/16/16
Asakusa Frameworkでの画像処理
小城様 お問い合わせありがとうございます。 別途、ご連絡させて頂きます。 取り急ぎ、ご返信まで。 ノーチラス 中田 2016年2月17日水曜日、koshiro<koshiro@develop.
unread,
Asakusa Frameworkでの画像処理
小城様 お問い合わせありがとうございます。 別途、ご連絡させて頂きます。 取り急ぎ、ご返信まで。 ノーチラス 中田 2016年2月17日水曜日、koshiro<koshiro@develop.
2/16/16
Nakata Atsushi
,
KAWAGUCHI, Akira
3
8/23/15
DirectI/Oを使用した分散処理モードでの設定について
かわぐち様 中田です。 アドバイス頂き、ありがとうございます。 その後、Hadoopの設定やHadoopコマンド等見直したのですが、 原因となるような箇所が発見できず、 hdfs://master:
unread,
DirectI/Oを使用した分散処理モードでの設定について
かわぐち様 中田です。 アドバイス頂き、ありがとうございます。 その後、Hadoopの設定やHadoopコマンド等見直したのですが、 原因となるような箇所が発見できず、 hdfs://master:
8/23/15
小原恒夫
,
KAWAGUCHI, Akira
3
1/15/15
Amazon S3 へのアクセスが制限されている環境での、プロジェクトテンプレートからの新規プロジェクトの作成について
かわぐち さま 丁寧なご解説、誠にありがとうございます。 大変勉強になりました。 お示しいただいた方法を参考に、自身の環境での次善策を検討してみます。 この度は、ご回答くださりありがとうございました。
unread,
Amazon S3 へのアクセスが制限されている環境での、プロジェクトテンプレートからの新規プロジェクトの作成について
かわぐち さま 丁寧なご解説、誠にありがとうございます。 大変勉強になりました。 お示しいただいた方法を参考に、自身の環境での次善策を検討してみます。 この度は、ご回答くださりありがとうございました。
1/15/15
中島賢弘
11/20/14
Error:java heap space
お世話になっております。中島です。 Hadoop上で実データを投入し、Asakusaバッチを実行した所、 Hadoopにて「Error:java heap space」が発生。 Hadoop(MapR)
unread,
Error:java heap space
お世話になっております。中島です。 Hadoop上で実データを投入し、Asakusaバッチを実行した所、 Hadoopにて「Error:java heap space」が発生。 Hadoop(MapR)
11/20/14
teppei tosa
,
KAWAGUCHI, Akira
5
10/15/14
[0.7.0]プロジェクト作成で失敗
かわぐちです。 この問題をShafu側の修正で回避することができたので、 この修正が入ったものを Shafu 0.3.2 として先ほどリリースしました。 このバージョンのShafuを使うことで、 先述の
unread,
[0.7.0]プロジェクト作成で失敗
かわぐちです。 この問題をShafu側の修正で回避することができたので、 この修正が入ったものを Shafu 0.3.2 として先ほどリリースしました。 このバージョンのShafuを使うことで、 先述の
10/15/14
teppei tosa
,
satoruf
2
4/8/14
「Asakusa Framework 勉強会 2014春」開催のお知らせ
勉強会で発表したスライドを下記にアップしました。 「JobSchedulerを使ったAsakusaのジョブ管理」 http://www.slideshare.net/sfunai/
unread,
「Asakusa Framework 勉強会 2014春」開催のお知らせ
勉強会で発表したスライドを下記にアップしました。 「JobSchedulerを使ったAsakusaのジョブ管理」 http://www.slideshare.net/sfunai/
4/8/14
teppei tosa
12/14/13
「Asakusa Framework 勉強会 2014 冬」開催のお知らせ
こんにちわ。土佐です。 「Asakusa Framework 勉強会 2014 冬」を開催しますので、お知らせ致します。 日時:2014年1月29日(水)19:00〜21:00 場所:日立
unread,
「Asakusa Framework 勉強会 2014 冬」開催のお知らせ
こんにちわ。土佐です。 「Asakusa Framework 勉強会 2014 冬」を開催しますので、お知らせ致します。 日時:2014年1月29日(水)19:00〜21:00 場所:日立
12/14/13
ico
,
菱田真人
3
11/27/13
複数レコードを1レコードにまとめる方法について
ひしだまさま まさにやりたいことはこれでした。 参考ページ、とても解りやすいです。 今後の開発の参考にさせていただきたいと思います。 この度はご回答ありがとうございました。 2013年11月26日火曜日
unread,
複数レコードを1レコードにまとめる方法について
ひしだまさま まさにやりたいことはこれでした。 参考ページ、とても解りやすいです。 今後の開発の参考にさせていただきたいと思います。 この度はご回答ありがとうございました。 2013年11月26日火曜日
11/27/13
ico
,
KAWAGUCHI, Akira
3
11/21/13
asakusaFWを用いたバッチの実装について
かわぐち様 ご返信ありがとうございます。 BatchDescription#describeは ジョブフロー間の関係を記述する用途にのみ使用できます。 やはりそうなのですね。 Javaライクな書き方の
unread,
asakusaFWを用いたバッチの実装について
かわぐち様 ご返信ありがとうございます。 BatchDescription#describeは ジョブフロー間の関係を記述する用途にのみ使用できます。 やはりそうなのですね。 Javaライクな書き方の
11/21/13
koji zenko
,
KAWAGUCHI, Akira
4
9/26/13
FlowPartTesterでのエラー
かわぐちさん zenkoです。 ご回答ありがとうございます。 まさに、以下環境でした。 >手元では、開発環境にインストールしたAsakusa Frameworkのバージョンが 0.5.0 ,
unread,
FlowPartTesterでのエラー
かわぐちさん zenkoです。 ご回答ありがとうございます。 まさに、以下環境でした。 >手元では、開発環境にインストールしたAsakusa Frameworkのバージョンが 0.5.0 ,
9/26/13
sugimoto
,
古山慎悟
3
7/3/13
DMDLを使った外部結合的な表現
古山慎吾様 回答ありがとうございます。 確認できました。 同じ観点ですが、 outer join(left,right,full)を実現するには、結合演算子の左辺右辺の入れ替えで実現するイメージでしょ
unread,
DMDLを使った外部結合的な表現
古山慎吾様 回答ありがとうございます。 確認できました。 同じ観点ですが、 outer join(left,right,full)を実現するには、結合演算子の左辺右辺の入れ替えで実現するイメージでしょ
7/3/13
神谷実花
, …
sugimoto
7
7/2/13
DirectI/Oを使用したamazon S3からの入出力設定について
sugimotoです すみません、当方では EMRでのみ稼動確認できています。 ※参考までですが、EC2をお使いの用途は分かりませんが、 EMRではバッチ終了後も起動状態を維持し続けることもできます。
unread,
DirectI/Oを使用したamazon S3からの入出力設定について
sugimotoです すみません、当方では EMRでのみ稼動確認できています。 ※参考までですが、EC2をお使いの用途は分かりませんが、 EMRではバッチ終了後も起動状態を維持し続けることもできます。
7/2/13
Kaneko Takehiro
6/25/13
WindGateでリモートHadoopにアクセスする際の設定について
金子と申します。 よろしくお願いします。 WindGateでリモートHadoop環境にSSHアクセスするパターンですが、 ドキュメントに「接続元でもHadoopの設定が必要」とあります。 具体的に
unread,
WindGateでリモートHadoopにアクセスする際の設定について
金子と申します。 よろしくお願いします。 WindGateでリモートHadoop環境にSSHアクセスするパターンですが、 ドキュメントに「接続元でもHadoopの設定が必要」とあります。 具体的に
6/25/13
kaneko takehiro
,
hishidama
3
6/19/13
DMDLコンパイルエラーのデバッグ方法
さっそくインストールさせていただきました。 とっても便利で使いやすいです! ありがとうございます。 2013年6月19日水曜日 14時35分47秒 UTC+9 kaneko takehiro: 金子と
unread,
DMDLコンパイルエラーのデバッグ方法
さっそくインストールさせていただきました。 とっても便利で使いやすいです! ありがとうございます。 2013年6月19日水曜日 14時35分47秒 UTC+9 kaneko takehiro: 金子と
6/19/13
kaneko takehiro
,
田中修
6
6/19/13
eclipse設定ファイル作成時のエラーについて
プロキシフリーな環境で試したところ、 何も問題なく動きました。 現在順調に検証中です。 ありがとうございました。 2013年6月11日火曜日 9時46分09秒 UTC+9 kaneko takehiro
unread,
eclipse設定ファイル作成時のエラーについて
プロキシフリーな環境で試したところ、 何も問題なく動きました。 現在順調に検証中です。 ありがとうございました。 2013年6月11日火曜日 9時46分09秒 UTC+9 kaneko takehiro
6/19/13
tomoa...@gmail.com
,
KAWAGUCHI, Akira
3
6/16/13
プロジェクトディレクトリ準備中のエラーについて
浅利です。返信遅くなり申し訳ありません。 ご教示ありがとうございます。ただいま、自環境の再構築中なので、 準備が出来次第、再挑戦してみます。 ありがとうございました。 アーキタイプカタログファイルの指定
unread,
プロジェクトディレクトリ準備中のエラーについて
浅利です。返信遅くなり申し訳ありません。 ご教示ありがとうございます。ただいま、自環境の再構築中なので、 準備が出来次第、再挑戦してみます。 ありがとうございました。 アーキタイプカタログファイルの指定
6/16/13
田中修
2
5/23/13
com.asakusafw.runtime.io.csv.CsvFormatException: TOO_LONG_RECORDが出てしまいます。
田中修です。 自己解答いたします。 TOO_LONG_RECORDのエラー原因がわかりました。 CSVのデータ項目がDMDLファイルのデータ項目の数を上回った場合 項目が足りないという表示を出している
unread,
com.asakusafw.runtime.io.csv.CsvFormatException: TOO_LONG_RECORDが出てしまいます。
田中修です。 自己解答いたします。 TOO_LONG_RECORDのエラー原因がわかりました。 CSVのデータ項目がDMDLファイルのデータ項目の数を上回った場合 項目が足りないという表示を出している
5/23/13
sugimoto
,
田中修
3
5/22/13
EMRでの動作
田中修 様 ありがとうございます 助かります 指定頂いた、AMI2.3.5で動作確認させてみます。 ありがとうございます。 2013年5月23日木曜日 8時47分23秒 UTC+9 田中修:
unread,
EMRでの動作
田中修 様 ありがとうございます 助かります 指定頂いた、AMI2.3.5で動作確認させてみます。 ありがとうございます。 2013年5月23日木曜日 8時47分23秒 UTC+9 田中修:
5/22/13
田中修
,
KAWAGUCHI, Akira
6
5/14/13
Flowpartのテストロジックにてエラー「Java heap space」
かわぐち様 度々お騒がせしております。 田中修です。 メモリをMAX3GBに変更したところ、JavaHeapSpaceが改善されました。 <plugin> <groupId>
unread,
Flowpartのテストロジックにてエラー「Java heap space」
かわぐち様 度々お騒がせしております。 田中修です。 メモリをMAX3GBに変更したところ、JavaHeapSpaceが改善されました。 <plugin> <groupId>
5/14/13
田中修
,
KAWAGUCHI, Akira
2
5/14/13
OSがWindowsの環境下でのasakusa framework 0.5.0のビルドエラー
かわぐちです。 > これは何のために追加されたのでしょうか? DMDLのコンパイラプラグインを配置するための 追加ディレクトリです。 バージョン0.5.0から追加されましたが、 現時点ではこれを
unread,
OSがWindowsの環境下でのasakusa framework 0.5.0のビルドエラー
かわぐちです。 > これは何のために追加されたのでしょうか? DMDLのコンパイラプラグインを配置するための 追加ディレクトリです。 バージョン0.5.0から追加されましたが、 現時点ではこれを
5/14/13
田中修
2
5/11/13
Jobflow/BatchのTestロジックの実行エラー「variable "date" is not defined in the variable table」
度々お騒がせしております。 田中修です。 自己解決いたしましたのでご連絡いたします。 どこの部分を修正するとこのエラーが出るのかが分かりました。 しかし、エラーが解決しておりません。 今回のエラーの原因
unread,
Jobflow/BatchのTestロジックの実行エラー「variable "date" is not defined in the variable table」
度々お騒がせしております。 田中修です。 自己解決いたしましたのでご連絡いたします。 どこの部分を修正するとこのエラーが出るのかが分かりました。 しかし、エラーが解決しておりません。 今回のエラーの原因
5/11/13
teppei tosa
,
古山慎悟
2
5/7/13
結合キーを伴わない結合をする際のDSL記述方法について
土佐さん、 タイトルと例示から意図を察した範囲でですが、 やりたいことは結合ではなくデータの合流ではないかと思います。 合流を行う際には合流させるデータすべてについて同一の型である必要があるので、 変換
unread,
結合キーを伴わない結合をする際のDSL記述方法について
土佐さん、 タイトルと例示から意図を察した範囲でですが、 やりたいことは結合ではなくデータの合流ではないかと思います。 合流を行う際には合流させるデータすべてについて同一の型である必要があるので、 変換
5/7/13
田中修
,
KAWAGUCHI, Akira
3
5/6/13
AsakusaFWのテストロジックについて
かわぐち様 ご連絡ありがとうございます。 ルール定義の使い方がいまいち不明なのですが Excelを使いたくないのでCSVをそのまま利用したいので Javaでできるとありがたいです。 ご連絡ありがとう
unread,
AsakusaFWのテストロジックについて
かわぐち様 ご連絡ありがとうございます。 ルール定義の使い方がいまいち不明なのですが Excelを使いたくないのでCSVをそのまま利用したいので Javaでできるとありがたいです。 ご連絡ありがとう
5/6/13
teppei tosa
,
KAWAGUCHI, Akira
3
5/6/13
yaess-batch.sh の実行時に yaess-script.properties の java.io.FileNotFoundException
なるほど。手順を見逃していました。 問題なく、バッチを実行することができました。 ありがとうございました。 2013年5月5日日曜日 13時32分16秒 UTC+9 KAWAGUCHI, Akira:
unread,
yaess-batch.sh の実行時に yaess-script.properties の java.io.FileNotFoundException
なるほど。手順を見逃していました。 問題なく、バッチを実行することができました。 ありがとうございました。 2013年5月5日日曜日 13時32分16秒 UTC+9 KAWAGUCHI, Akira:
5/6/13
田中修
,
古山慎悟
4
5/2/13
「出力が別 の入力を上書きします」というコンパイルエラー
古山様 ありがとうございます。 出力のみの制約ということなのでしょうか? サイトを読みましたが理解出来ませんでした。 私がHadoopを理解していないのがそもそもの原因かもしれません。 情報提供
unread,
「出力が別 の入力を上書きします」というコンパイルエラー
古山様 ありがとうございます。 出力のみの制約ということなのでしょうか? サイトを読みましたが理解出来ませんでした。 私がHadoopを理解していないのがそもそもの原因かもしれません。 情報提供
5/2/13
ペガス
,
古山慎悟
3
3/18/13
マスタデータをあらかじめHDFSに配置する方法について
古山さんお世話になっております、ぺガスです。 教えて頂いたリンクを拝見いたしました。 どうやら、AsakusaFrameworkにはHDFSを直接利用する機能があるようですね。 基本的なことを質問して
unread,
マスタデータをあらかじめHDFSに配置する方法について
古山さんお世話になっております、ぺガスです。 教えて頂いたリンクを拝見いたしました。 どうやら、AsakusaFrameworkにはHDFSを直接利用する機能があるようですね。 基本的なことを質問して
3/18/13
mobarex
,
古山慎悟
4
2/6/13
処理したレコード件数の取得方法について
mobarexさん、 このカウンターは、演算子クラスのメソッド内から参照できないでしょうか? 残念ながらできません。 演算子メソッドはMapReduce Jobの実行順序を意識することができるレイヤでは
unread,
処理したレコード件数の取得方法について
mobarexさん、 このカウンターは、演算子クラスのメソッド内から参照できないでしょうか? 残念ながらできません。 演算子メソッドはMapReduce Jobの実行順序を意識することができるレイヤでは
2/6/13
ペガス
,
KAWAGUCHI, Akira
3
1/22/13
DATETIME型で集約関数max、minは使えるのか
かわぐちさん、ご指導ありがとうございます。 確かに集計レコード中にNULLデータがありましたので、 それを除去するようなロジックを組み込んでみます。 2013年1月22日火曜日 20時33分23秒
unread,
DATETIME型で集約関数max、minは使えるのか
かわぐちさん、ご指導ありがとうございます。 確かに集計レコード中にNULLデータがありましたので、 それを除去するようなロジックを組み込んでみます。 2013年1月22日火曜日 20時33分23秒
1/22/13