グループ
ログイン
グループ
Asakusa Frameworkメーリングリスト
スレッド
情報
フィードバックを送信
ヘルプ
Asakusa Frameworkメーリングリスト
オーナーとマネージャーに問い合わせる
1–30 / 41 件
すべて既読としてマーク
グループを報告
0 行を選択中
ハピタン
,
KAWAGUCHI, Akira
4
2017/09/24
Yaessログの警告について
かわぐちです。 > Asakusa側も何度か再配置しているのですがどこかにゴミ?が残っているのでしょうか。 メールに記載の情報のみだとなんとも言えないのですが、 どこかにゴミが残っていることで
未読、
Yaessログの警告について
かわぐちです。 > Asakusa側も何度か再配置しているのですがどこかにゴミ?が残っているのでしょうか。 メールに記載の情報のみだとなんとも言えないのですが、 どこかにゴミが残っていることで
2017/09/24
ハピタン
,
KAWAGUCHI, Akira
4
2017/08/31
ログの出力について
かわぐちです。 参考になるかはわかりませんが、 Report APIの実装は設定によって変更することが可能です。 以下ドキュメントです。 http://docs.asakusafw.com/latest
未読、
ログの出力について
かわぐちです。 参考になるかはわかりませんが、 Report APIの実装は設定によって変更することが可能です。 以下ドキュメントです。 http://docs.asakusafw.com/latest
2017/08/31
koshiro
,
中田明
2
2016/02/16
Asakusa Frameworkでの画像処理
小城様 お問い合わせありがとうございます。 別途、ご連絡させて頂きます。 取り急ぎ、ご返信まで。 ノーチラス 中田 2016年2月17日水曜日、koshiro<koshiro@develop.
未読、
Asakusa Frameworkでの画像処理
小城様 お問い合わせありがとうございます。 別途、ご連絡させて頂きます。 取り急ぎ、ご返信まで。 ノーチラス 中田 2016年2月17日水曜日、koshiro<koshiro@develop.
2016/02/16
Nakata Atsushi
,
KAWAGUCHI, Akira
3
2015/08/23
DirectI/Oを使用した分散処理モードでの設定について
かわぐち様 中田です。 アドバイス頂き、ありがとうございます。 その後、Hadoopの設定やHadoopコマンド等見直したのですが、 原因となるような箇所が発見できず、 hdfs://master:
未読、
DirectI/Oを使用した分散処理モードでの設定について
かわぐち様 中田です。 アドバイス頂き、ありがとうございます。 その後、Hadoopの設定やHadoopコマンド等見直したのですが、 原因となるような箇所が発見できず、 hdfs://master:
2015/08/23
小原恒夫
,
KAWAGUCHI, Akira
3
2015/01/15
Amazon S3 へのアクセスが制限されている環境での、プロジェクトテンプレートからの新規プロジェクトの作成について
かわぐち さま 丁寧なご解説、誠にありがとうございます。 大変勉強になりました。 お示しいただいた方法を参考に、自身の環境での次善策を検討してみます。 この度は、ご回答くださりありがとうございました。
未読、
Amazon S3 へのアクセスが制限されている環境での、プロジェクトテンプレートからの新規プロジェクトの作成について
かわぐち さま 丁寧なご解説、誠にありがとうございます。 大変勉強になりました。 お示しいただいた方法を参考に、自身の環境での次善策を検討してみます。 この度は、ご回答くださりありがとうございました。
2015/01/15
中島賢弘
2014/11/20
Error:java heap space
お世話になっております。中島です。 Hadoop上で実データを投入し、Asakusaバッチを実行した所、 Hadoopにて「Error:java heap space」が発生。 Hadoop(MapR)
未読、
Error:java heap space
お世話になっております。中島です。 Hadoop上で実データを投入し、Asakusaバッチを実行した所、 Hadoopにて「Error:java heap space」が発生。 Hadoop(MapR)
2014/11/20
teppei tosa
,
KAWAGUCHI, Akira
5
2014/10/15
[0.7.0]プロジェクト作成で失敗
かわぐちです。 この問題をShafu側の修正で回避することができたので、 この修正が入ったものを Shafu 0.3.2 として先ほどリリースしました。 このバージョンのShafuを使うことで、 先述の
未読、
[0.7.0]プロジェクト作成で失敗
かわぐちです。 この問題をShafu側の修正で回避することができたので、 この修正が入ったものを Shafu 0.3.2 として先ほどリリースしました。 このバージョンのShafuを使うことで、 先述の
2014/10/15
teppei tosa
,
satoruf
2
2014/04/08
「Asakusa Framework 勉強会 2014春」開催のお知らせ
勉強会で発表したスライドを下記にアップしました。 「JobSchedulerを使ったAsakusaのジョブ管理」 http://www.slideshare.net/sfunai/
未読、
「Asakusa Framework 勉強会 2014春」開催のお知らせ
勉強会で発表したスライドを下記にアップしました。 「JobSchedulerを使ったAsakusaのジョブ管理」 http://www.slideshare.net/sfunai/
2014/04/08
teppei tosa
2013/12/14
「Asakusa Framework 勉強会 2014 冬」開催のお知らせ
こんにちわ。土佐です。 「Asakusa Framework 勉強会 2014 冬」を開催しますので、お知らせ致します。 日時:2014年1月29日(水)19:00〜21:00 場所:日立
未読、
「Asakusa Framework 勉強会 2014 冬」開催のお知らせ
こんにちわ。土佐です。 「Asakusa Framework 勉強会 2014 冬」を開催しますので、お知らせ致します。 日時:2014年1月29日(水)19:00〜21:00 場所:日立
2013/12/14
ico
,
菱田真人
3
2013/11/27
複数レコードを1レコードにまとめる方法について
ひしだまさま まさにやりたいことはこれでした。 参考ページ、とても解りやすいです。 今後の開発の参考にさせていただきたいと思います。 この度はご回答ありがとうございました。 2013年11月26日火曜日
未読、
複数レコードを1レコードにまとめる方法について
ひしだまさま まさにやりたいことはこれでした。 参考ページ、とても解りやすいです。 今後の開発の参考にさせていただきたいと思います。 この度はご回答ありがとうございました。 2013年11月26日火曜日
2013/11/27
ico
,
KAWAGUCHI, Akira
3
2013/11/21
asakusaFWを用いたバッチの実装について
かわぐち様 ご返信ありがとうございます。 BatchDescription#describeは ジョブフロー間の関係を記述する用途にのみ使用できます。 やはりそうなのですね。 Javaライクな書き方の
未読、
asakusaFWを用いたバッチの実装について
かわぐち様 ご返信ありがとうございます。 BatchDescription#describeは ジョブフロー間の関係を記述する用途にのみ使用できます。 やはりそうなのですね。 Javaライクな書き方の
2013/11/21
koji zenko
,
KAWAGUCHI, Akira
4
2013/09/26
FlowPartTesterでのエラー
かわぐちさん zenkoです。 ご回答ありがとうございます。 まさに、以下環境でした。 >手元では、開発環境にインストールしたAsakusa Frameworkのバージョンが 0.5.0 ,
未読、
FlowPartTesterでのエラー
かわぐちさん zenkoです。 ご回答ありがとうございます。 まさに、以下環境でした。 >手元では、開発環境にインストールしたAsakusa Frameworkのバージョンが 0.5.0 ,
2013/09/26
sugimoto
,
古山慎悟
3
2013/07/03
DMDLを使った外部結合的な表現
古山慎吾様 回答ありがとうございます。 確認できました。 同じ観点ですが、 outer join(left,right,full)を実現するには、結合演算子の左辺右辺の入れ替えで実現するイメージでしょ
未読、
DMDLを使った外部結合的な表現
古山慎吾様 回答ありがとうございます。 確認できました。 同じ観点ですが、 outer join(left,right,full)を実現するには、結合演算子の左辺右辺の入れ替えで実現するイメージでしょ
2013/07/03
神谷実花
, …
sugimoto
7
2013/07/02
DirectI/Oを使用したamazon S3からの入出力設定について
sugimotoです すみません、当方では EMRでのみ稼動確認できています。 ※参考までですが、EC2をお使いの用途は分かりませんが、 EMRではバッチ終了後も起動状態を維持し続けることもできます。
未読、
DirectI/Oを使用したamazon S3からの入出力設定について
sugimotoです すみません、当方では EMRでのみ稼動確認できています。 ※参考までですが、EC2をお使いの用途は分かりませんが、 EMRではバッチ終了後も起動状態を維持し続けることもできます。
2013/07/02
Kaneko Takehiro
2013/06/25
WindGateでリモートHadoopにアクセスする際の設定について
金子と申します。 よろしくお願いします。 WindGateでリモートHadoop環境にSSHアクセスするパターンですが、 ドキュメントに「接続元でもHadoopの設定が必要」とあります。 具体的に
未読、
WindGateでリモートHadoopにアクセスする際の設定について
金子と申します。 よろしくお願いします。 WindGateでリモートHadoop環境にSSHアクセスするパターンですが、 ドキュメントに「接続元でもHadoopの設定が必要」とあります。 具体的に
2013/06/25
kaneko takehiro
,
hishidama
3
2013/06/19
DMDLコンパイルエラーのデバッグ方法
さっそくインストールさせていただきました。 とっても便利で使いやすいです! ありがとうございます。 2013年6月19日水曜日 14時35分47秒 UTC+9 kaneko takehiro: 金子と
未読、
DMDLコンパイルエラーのデバッグ方法
さっそくインストールさせていただきました。 とっても便利で使いやすいです! ありがとうございます。 2013年6月19日水曜日 14時35分47秒 UTC+9 kaneko takehiro: 金子と
2013/06/19
kaneko takehiro
,
田中修
6
2013/06/19
eclipse設定ファイル作成時のエラーについて
プロキシフリーな環境で試したところ、 何も問題なく動きました。 現在順調に検証中です。 ありがとうございました。 2013年6月11日火曜日 9時46分09秒 UTC+9 kaneko takehiro
未読、
eclipse設定ファイル作成時のエラーについて
プロキシフリーな環境で試したところ、 何も問題なく動きました。 現在順調に検証中です。 ありがとうございました。 2013年6月11日火曜日 9時46分09秒 UTC+9 kaneko takehiro
2013/06/19
tomoa...@gmail.com
,
KAWAGUCHI, Akira
3
2013/06/16
プロジェクトディレクトリ準備中のエラーについて
浅利です。返信遅くなり申し訳ありません。 ご教示ありがとうございます。ただいま、自環境の再構築中なので、 準備が出来次第、再挑戦してみます。 ありがとうございました。 アーキタイプカタログファイルの指定
未読、
プロジェクトディレクトリ準備中のエラーについて
浅利です。返信遅くなり申し訳ありません。 ご教示ありがとうございます。ただいま、自環境の再構築中なので、 準備が出来次第、再挑戦してみます。 ありがとうございました。 アーキタイプカタログファイルの指定
2013/06/16
田中修
2
2013/05/23
com.asakusafw.runtime.io.csv.CsvFormatException: TOO_LONG_RECORDが出てしまいます。
田中修です。 自己解答いたします。 TOO_LONG_RECORDのエラー原因がわかりました。 CSVのデータ項目がDMDLファイルのデータ項目の数を上回った場合 項目が足りないという表示を出している
未読、
com.asakusafw.runtime.io.csv.CsvFormatException: TOO_LONG_RECORDが出てしまいます。
田中修です。 自己解答いたします。 TOO_LONG_RECORDのエラー原因がわかりました。 CSVのデータ項目がDMDLファイルのデータ項目の数を上回った場合 項目が足りないという表示を出している
2013/05/23
sugimoto
,
田中修
3
2013/05/22
EMRでの動作
田中修 様 ありがとうございます 助かります 指定頂いた、AMI2.3.5で動作確認させてみます。 ありがとうございます。 2013年5月23日木曜日 8時47分23秒 UTC+9 田中修:
未読、
EMRでの動作
田中修 様 ありがとうございます 助かります 指定頂いた、AMI2.3.5で動作確認させてみます。 ありがとうございます。 2013年5月23日木曜日 8時47分23秒 UTC+9 田中修:
2013/05/22
田中修
,
KAWAGUCHI, Akira
6
2013/05/14
Flowpartのテストロジックにてエラー「Java heap space」
かわぐち様 度々お騒がせしております。 田中修です。 メモリをMAX3GBに変更したところ、JavaHeapSpaceが改善されました。 <plugin> <groupId>
未読、
Flowpartのテストロジックにてエラー「Java heap space」
かわぐち様 度々お騒がせしております。 田中修です。 メモリをMAX3GBに変更したところ、JavaHeapSpaceが改善されました。 <plugin> <groupId>
2013/05/14
田中修
,
KAWAGUCHI, Akira
2
2013/05/14
OSがWindowsの環境下でのasakusa framework 0.5.0のビルドエラー
かわぐちです。 > これは何のために追加されたのでしょうか? DMDLのコンパイラプラグインを配置するための 追加ディレクトリです。 バージョン0.5.0から追加されましたが、 現時点ではこれを
未読、
OSがWindowsの環境下でのasakusa framework 0.5.0のビルドエラー
かわぐちです。 > これは何のために追加されたのでしょうか? DMDLのコンパイラプラグインを配置するための 追加ディレクトリです。 バージョン0.5.0から追加されましたが、 現時点ではこれを
2013/05/14
田中修
2
2013/05/11
Jobflow/BatchのTestロジックの実行エラー「variable "date" is not defined in the variable table」
度々お騒がせしております。 田中修です。 自己解決いたしましたのでご連絡いたします。 どこの部分を修正するとこのエラーが出るのかが分かりました。 しかし、エラーが解決しておりません。 今回のエラーの原因
未読、
Jobflow/BatchのTestロジックの実行エラー「variable "date" is not defined in the variable table」
度々お騒がせしております。 田中修です。 自己解決いたしましたのでご連絡いたします。 どこの部分を修正するとこのエラーが出るのかが分かりました。 しかし、エラーが解決しておりません。 今回のエラーの原因
2013/05/11
teppei tosa
,
古山慎悟
2
2013/05/07
結合キーを伴わない結合をする際のDSL記述方法について
土佐さん、 タイトルと例示から意図を察した範囲でですが、 やりたいことは結合ではなくデータの合流ではないかと思います。 合流を行う際には合流させるデータすべてについて同一の型である必要があるので、 変換
未読、
結合キーを伴わない結合をする際のDSL記述方法について
土佐さん、 タイトルと例示から意図を察した範囲でですが、 やりたいことは結合ではなくデータの合流ではないかと思います。 合流を行う際には合流させるデータすべてについて同一の型である必要があるので、 変換
2013/05/07
田中修
,
KAWAGUCHI, Akira
3
2013/05/06
AsakusaFWのテストロジックについて
かわぐち様 ご連絡ありがとうございます。 ルール定義の使い方がいまいち不明なのですが Excelを使いたくないのでCSVをそのまま利用したいので Javaでできるとありがたいです。 ご連絡ありがとう
未読、
AsakusaFWのテストロジックについて
かわぐち様 ご連絡ありがとうございます。 ルール定義の使い方がいまいち不明なのですが Excelを使いたくないのでCSVをそのまま利用したいので Javaでできるとありがたいです。 ご連絡ありがとう
2013/05/06
teppei tosa
,
KAWAGUCHI, Akira
3
2013/05/06
yaess-batch.sh の実行時に yaess-script.properties の java.io.FileNotFoundException
なるほど。手順を見逃していました。 問題なく、バッチを実行することができました。 ありがとうございました。 2013年5月5日日曜日 13時32分16秒 UTC+9 KAWAGUCHI, Akira:
未読、
yaess-batch.sh の実行時に yaess-script.properties の java.io.FileNotFoundException
なるほど。手順を見逃していました。 問題なく、バッチを実行することができました。 ありがとうございました。 2013年5月5日日曜日 13時32分16秒 UTC+9 KAWAGUCHI, Akira:
2013/05/06
田中修
,
古山慎悟
4
2013/05/02
「出力が別 の入力を上書きします」というコンパイルエラー
古山様 ありがとうございます。 出力のみの制約ということなのでしょうか? サイトを読みましたが理解出来ませんでした。 私がHadoopを理解していないのがそもそもの原因かもしれません。 情報提供
未読、
「出力が別 の入力を上書きします」というコンパイルエラー
古山様 ありがとうございます。 出力のみの制約ということなのでしょうか? サイトを読みましたが理解出来ませんでした。 私がHadoopを理解していないのがそもそもの原因かもしれません。 情報提供
2013/05/02
ペガス
,
古山慎悟
3
2013/03/18
マスタデータをあらかじめHDFSに配置する方法について
古山さんお世話になっております、ぺガスです。 教えて頂いたリンクを拝見いたしました。 どうやら、AsakusaFrameworkにはHDFSを直接利用する機能があるようですね。 基本的なことを質問して
未読、
マスタデータをあらかじめHDFSに配置する方法について
古山さんお世話になっております、ぺガスです。 教えて頂いたリンクを拝見いたしました。 どうやら、AsakusaFrameworkにはHDFSを直接利用する機能があるようですね。 基本的なことを質問して
2013/03/18
mobarex
,
古山慎悟
4
2013/02/06
処理したレコード件数の取得方法について
mobarexさん、 このカウンターは、演算子クラスのメソッド内から参照できないでしょうか? 残念ながらできません。 演算子メソッドはMapReduce Jobの実行順序を意識することができるレイヤでは
未読、
処理したレコード件数の取得方法について
mobarexさん、 このカウンターは、演算子クラスのメソッド内から参照できないでしょうか? 残念ながらできません。 演算子メソッドはMapReduce Jobの実行順序を意識することができるレイヤでは
2013/02/06
ペガス
,
KAWAGUCHI, Akira
3
2013/01/22
DATETIME型で集約関数max、minは使えるのか
かわぐちさん、ご指導ありがとうございます。 確かに集計レコード中にNULLデータがありましたので、 それを除去するようなロジックを組み込んでみます。 2013年1月22日火曜日 20時33分23秒
未読、
DATETIME型で集約関数max、minは使えるのか
かわぐちさん、ご指導ありがとうございます。 確かに集計レコード中にNULLデータがありましたので、 それを除去するようなロジックを組み込んでみます。 2013年1月22日火曜日 20時33分23秒
2013/01/22