上一篇快速认识Kafka阶段(1)——最详细的Kafka介绍给大家简单介绍了消息队列和kafka的一些基本内容,下面教大家怎样去安装部署Kafka集群哦!!!!!!
码字不易 先点个赞吧!
1、初始化环境准备
安装jdk,安装zookeeper并保证zk服务正常启动
2、下载安装包并上传解压
点击文字下载Kafka安装包
提取码:r766
代码语言:javascript复制node01执行以下命令,下载并解压
cd /export/softwares
tar –zxvf kafka_2.11-1.0.0.tgz -C /export/servers/
3、node01服务器修改kafka配置文件
代码语言:javascript复制node01执行以下命令进入到kafka的配置文件目录,修改配置文件
node01执行以下命令创建数据文件存放目录
mkdir -p /export/servers/kafka_2.11-1.0.0/logs
cd /export/servers/kafka_2.11-1.0.0/config
vim server.properties
代码语言:javascript复制broker.id=0 (每个节点不能相同)
log.dirs=/export/servers/kafka_2.11-1.0.0/logs/
zookeeper.connect=node01:2181,node02:2181,node03:2181
delete.topic.enable=true
host.name=node01 (改成对应的节点)
4、安装包分发到其他服务器上面去
代码语言:javascript复制node01执行以下命令,将node01服务器的kafka安装包发送到node02和node03服务器上面去
cd /export/servers/
scp -r kafka_2.11-1.0.0/ node02:$PWD
scp -r kafka_2.11-1.0.0/ node03:$PWD
5、node02与node03服务器修改配置文件
node02使用以下命令修改kafka配置文件
代码语言:javascript复制cd /export/servers/kafka_2.11-1.0.0/config
vim server.properties
broker.id=1 (每个节点不能相同)
log.dirs=/export/servers/kafka_2.11-1.0.0/logs/
zookeeper.connect=node01:2181,node02:2181,node03:2181
delete.topic.enable=true
host.name=node02
node03使用以下命令修改kafka配置文件
代码语言:javascript复制cd /export/servers/kafka_2.11-1.0.0/config
vim server.properties
代码语言:javascript复制broker.id=2 (每个节点不能相同)
log.dirs=/export/servers/kafka_2.11-1.0.0/logs/
zookeeper.connect=node01:2181,node02:2181,node03:2181
delete.topic.enable=true
host.name=node03
6、kafka集群启动与停止
注意事项:在kafka启动前,一定要让zookeeper启动起来。
node01执行以下命令将kafka进程启动在后台
代码语言:javascript复制cd /export/servers/kafka_2.11-1.0.0
nohup bin/kafka-server-start.sh config/server.properties 2>&1 &
node02执行以下命令将kafka进程启动在后台
代码语言:javascript复制cd /export/servers/kafka_2.11-1.0.0
nohup bin/kafka-server-start.sh config/server.properties 2>&1 &
node03执行以下命令将kafka进程启动在后台
代码语言:javascript复制cd /export/servers/kafka_2.11-1.0.0
nohup bin/kafka-server-start.sh config/server.properties 2>&1 &
三台机器也可以执行以下命令停止kafka集群
代码语言:javascript复制cd /export/servers/kafka_2.11-1.0.0
bin/kafka-server-stop.sh