kafka简介
kafka是一种高吞吐量的分布式发布订阅消息系统。
环境搭建
1.首先安装JDK
下载地址https://www.oracle.com/technetwork/java/javase/downloads/jre8-downloads-2133155.html
然后配置环境变量,java、javac进行检查我就不多说啦!
2.安装Zookeeper
下载地址:https://zookeeper.apache.org/releases.html
下载完成后,解压在目录D:bigdata下
注意:关于Zookeeper和kafka的路径中最好不要出现空格,例如C:Program Files,否则将会导致运行脚本时会出现问题
一、下载完成后进入zookeeper的相关设置所在的文件目录,
D:\bigdata\zookeeper-3.4.13\conf
二、将
zoo_sample.cfg
重命名为zoo.cfg
三、编译zoo.cfg文件
找到
dataDir=/tmp/zookeeper
这一行代码然后将其修改为
dataDir=D:\bigdata\zookeeper-3.4.13\data
如果没有data文件夹请创建注意:路径要么是"/"分割,要么是转义字符"\",这样会生成正确的路径(层级,子目录)。
四、配置zookeeper的系统环境变量
①在系统变量中新建
ZOOKEEPER_HOME=D:\bigdata\zookeeper-3.4.13
②编辑系统变量中的path变量,增加%ZOOKEEPER_HOME%\bin
zookeeper的默认端口为2181
运行Zookeeper
打开cmd窗口,输入命令zkserver
,运行结果如图则为正确
注意:运行zookeeper后不要关闭此窗口服务
安装kafka
下载地址http://kafka.apache.org/downloads
进入页面后下载Binary downloads类型
下载后解压在D:bigdata目录下
一、进入kafka配置文件所在目录,D:\bigdata\kafka_2.11-2.2.0\config
二、编辑文件server.properties
修改kafka日志文件位置
log.dirs=D:/bigdata/kafka_2.11-2.2.0/kafka-logs
注意下面这行代码
如果在同一台机器上启动,而且是默认端口不做修改,如果有变得另做修改。
kafka的默认端口为9092
运行kafka
一、cmd进入kafka的安装目录,D:\bigdata\kafka_2.11-2.2.0
二、在命令行中输入
.\bin\windows\kafka-server-start.bat .\config\server.properties
出现下图代码则为正确