MapReduceプログラミングシリーズ7 MapReduceプログラムログを確認します。

491 ワード

まず、ログを印刷する必要があるならば、logl 4 jなどを使う必要がなくて、直接System.out.printlnを使えばいいです。これらはstdoutに出力されたログ情報はjobtrocerサイトで最終的に見つけられます。
次に、main関数の起動時にSystem.out.printlnで印刷したログがそのままコンソールで見られます。
その次に、jobtrocerサイトが重要です。
http://your_name_node:50030/jobtracker.jsp
ここでMapを見たら100%が正しいとは限らないです。Mapの段階でカードが完成していない場合もありますが、Map 100%が表示されますので、ログを見るまでは毎回ポイントを入れてください。
また、cluster summaryテーブルでは、map/reduce slaotsの場合が見られ、クラスタの計算リソースを知ることができる。シナリオタイミングを書いて、slaots情報を収集して、クラスタピークとアイドル時間の分析に便利です。