Cloudera 5.7クラスター配置(四)--KAFKA集積

3057 ワード

1 Cloudera kafka統合
  CDH    http://www.cloudera.com/content/www/en-us/documentation/kafka/latest/topics/kafka_installing.html
 CDH     Kafka           , CDH ,Kafka        parcel,      parcel     。

1.1 Kafka parcelsパッケージcsdパッケージをダウンロードする:http://archive.cloudera.com/csds/kafka/Cloudera 5.7集群部署(四)--KAFKA集成_第1张图片parcelパッケージ:http://archive.cloudera.com/kafka/parcels/latest/(独自のクラスタのシステムバージョンからダウンロード)Cloudera 5.7集群部署(四)--KAFKA集成_第2张图片1.2 Kafka parcelsパッケージアップロードKAFKA-1.2.0.JArはcmインストールノードの下の/opt/cloudera/csdディレクトリの下に置かれ、図:Cloudera 5.7集群部署(四)--KAFKA集成_第3张图片parcelパッケージをcmインストールノードの下の/opt/cloudera/parcel-repoディレクトリの下に置かれ、図:Cloudera 5.7集群部署(四)--KAFKA集成_第4张图片1.3のように更新をチェックし、割り当てアクティブ化は下図のように、割り当てられたkafka parcelsをアクティブ化する必要があります.Cloudera 5.7集群部署(四)--KAFKA集成_第5张图片次の図のように、アクティブ化成功这里写图片描述1.4クラスタにkafkaサービスを追加します.
1.5 kafkaがkafkaサービスをインストールすることを配置する時、java heap memory outがホストの各brokerの中で配置することを報告することができて見て、意外にもデフォルトは50 M(奇抜な配置)で、2 G以上に変更します:Cloudera 5.7集群部署(四)--KAFKA集成_第6张图片