CDH集成kafka

添加kafka(把包放到cm主机目录)

  1.下载kafka包http://archive.cloudera.com/kafka/parcels/latest/

   把包放到parcel-repo 目录

CDH集成kafka

2.下载csd包http://archive.cloudera.com/csds/kafka/

放到csd目录

CDH集成kafka

3.分配kafka包并激活

CDH集成kafka

CDH集成kafka

注意:如果进度卡在“已解压”,直接返回重新进来就会看到“激活”

4添加kafka角色

CDH集成kafka

可根据需求填写各选项(我这里直接默认)

以下是容易踩坑的

安装后启动报错“Java heap space

需要在cdh控制台上修改Java内存,默认50M,安装时也没提示让设置内存大小,结果自动安装后到最后的启动阶段报错(如下图)

CDH集成kafka

这个时候可以返回到首页,点击kafka,进入“配置”修改java内存

CDH集成kafka

找到Java Heap Size 改为1G(根据服务器配置改参数)

CDH集成kafka

最后控制台重启kafka就可以了

上一篇:【云栖大会】 蚂蚁金服首席技术官程立:计算创新升级金融生活


下一篇:搜索服务Solr集群搭建 使用ZooKeeper作为代理层