バッチ処理、ジョブ管理について書いてみる - wyukawa’s blog

2015/06/17 173 users wyukawa’s blog バッチ処理 Hive ジョブ

Azkaban, 技術僕はHive, Pythonでバッチ処理を書いてAzkabanでジョブ管理するシステムを構築、運用した経験が2年ほどあるので今日はバッチ処理、ジョブ管理について書いてみようと思います。僕の経験上Hadoop特有の部分、例えばテスト環境が作りづらいとかバッチサーバーはジョブをsubmitするだけなので負荷はそんなにかからないとか、はあるけれど割と汎用的なのではないかと思います。... 続きを読む

日本発で世界初、オープンソースの運用管理ツールが本格離陸：ITpro

2006/05/30 106 users ITpro Hinemos ソフトウェア クライアント 自社

画面●Hinemosを操作する「クライアント」では、ジョブ管理に加え性能管理も可能。Eclipse RCPとグラフ表示用ライブラリのJFreeChartを利用して開発した [画像のクリックで拡大表示] 「コストを自社で持ち出してでも企業情報システムで利用できるレベルまで引き上げたかった」----。NTTデータの基盤システム事業本部 オープンソース開発センタは現在、オープンソース・ソフトウエア（OS... 続きを読む