コンパイルspark-1.1.0バージョンメソッド

408 ワード

hadoopバージョンをコンパイルするコマンドは、make-distribution.shスクリプトを直接使用してコンパイルできます.コマンドは次のとおりです.
./make-distribution.sh --name hadoop2.4 --tgz -Pyarn -Phive -Phadoop-2.4 -Dhadoop.version=2.4.0

その後、現在tgzのファイルが生成されます.
cdhバージョンのコンパイルであれば、参考コマンドは以下の通りです.
./make-distribution.sh --name cdh4 --tgz -Phive -Pyarn-alpha -Dhadoop.version=2.0.0-cdh4.2.0