kafka安装监控 kafka eagle

2022-03-18 16:14:49 浏览数 (1)

官方文档:

代码语言:javascript复制
http://www.kafka-eagle.org/articles/docs/installation/linux-macos.html

下载Kafka Eagle

代码语言:javascript复制
https://link.zhihu.com/?target=http://download.smartloli.org

kafka-eagle-bin-1.2.3.tar.gz复制到Linux

解压 tar -xvf kafka-eagle-bin-1.2.3.tar.gz

重命名:mv kafka-eagle-bin-1.2.3 kafka-eagle

进入Kafka Eagle目录,进入conf目录修改system-config.properties配置文件内容如下

代码语言:javascript复制
######################################
# 配置多个Kafka集群所对应的Zookeeper
######################################
kafka.eagle.zk.cluster.alias=cluster1,cluster2
cluster1.zk.list=dn1:2181,dn2:2181,dn3:2181
cluster2.zk.list=tdn1:2181,tdn2:2181,tdn3:2181

######################################
# 设置Zookeeper线程数
######################################
kafka.zk.limit.size=25

######################################
# 设置Kafka Eagle浏览器访问端口
######################################
kafka.eagle.webui.port=8048

######################################
# 如果你的offsets存储在Kafka中,这里就配置
# 属性值为kafka,如果是在Zookeeper中,可以
# 注释该属性。一般情况下,Offsets的也和你消
# 费者API有关系,如果你使用的Kafka版本为0.10.x
# 以后的版本,但是,你的消费API使用的是0.8.2.x
# 时的API,此时消费者依然是在Zookeeper中
######################################
cluster1.kafka.eagle.offset.storage=kafka
####################################### 
如果你的集群一个是新版本(0.10.x以上),
# 一个是老版本(0.8或0.9),可以这样设置,
# 如果都是新版本,那么可以将值都设置成kafka
######################################
cluster2.kafka.eagle.offset.storage=zookeeper

######################################
# 是否启动监控图表,默认是不启动的
######################################
kafka.eagle.metrics.charts=false

######################################
# 在使用Kafka SQL查询主题时,如果遇到错误,
# 可以尝试开启这个属性,默认情况下,不开启
######################################
kafka.eagle.sql.fix.error=false

######################################
# 邮件服务器设置,用来告警
######################################
kafka.eagle.mail.enable=false
kafka.eagle.mail.sa=
kafka.eagle.mail.username=
kafka.eagle.mail.password=
kafka.eagle.mail.server.host=
kafka.eagle.mail.server.port=

######################################
# 设置告警用户,多个用户以英文逗号分隔
######################################
kafka.eagle.alert.users=smartloli.org@gmail.com


######################################
# 超级管理员删除主题的Token
######################################
kafka.eagle.topic.token=keadmin

######################################
# 如果启动Kafka SASL协议,开启该属性
######################################
kafka.eagle.sasl.enable=false
kafka.eagle.sasl.protocol=SASL_PLAINTEXT
kafka.eagle.sasl.mechanism=PLAIN

######################################
# Kafka Eagle默认存储在Sqlite中,如果要使用
# MySQL可以替换驱动、用户名、密码、连接地址
######################################
#kafka.eagle.driver=com.mysql.jdbc.Driver
#kafka.eagle.url=jdbc:mysql://127.0.0.1:3306/ke?useUnicode=true&characterEncoding=UTF-8&zeroDateTimeBehavior=convertToNull
#kafka.eagle.username=root
#kafka.eagle.password=123456

kafka.eagle.driver=org.sqlite.JDBC
kafka.eagle.url=jdbc:sqlite:/Users/dengjie/workspace/kafka-egale/db/ke.db
kafka.eagle.username=root
kafka.eagle.password=root

需要配置mysql 或者Sqlite,选一种就行了

安装JDK

代码语言:javascript复制
cd /usr/java
tar -zxvf jdk-xxxx.tar.gz
mv jdk-xxxx jdk1.8

或者:

代码语言:javascript复制
centos:yum install java-11-openjdk
ubuntu:apt install default-jdk

默安装默认的目录为:/usr/lib/jvm/
判断java是否安装成功:java -version

配置环境变量

代码语言:javascript复制
# java所在的目录 (不知道在哪里可以百度下)
export JAVA_HOME=/usr/
#kafka-eagle所在的目录
export KE_HOME=/home/kafka-eagle

export PATH=$PATH:$JAVA_HOME/bin:$KE_HOME/bin
source ~/.bash_profile

启动Kafka Eagle

配置完成后,可以执行Kafka Eagle脚本ke.sh。如果首次执行,需要给该脚本赋予执行权限,命令如下:

代码语言:javascript复制
chmod  x $KE_HOME/bin/ke.sh

在ke.sh脚本中,支持以下命令:

用 ./bin/ke.sh status 查看下状态,是running才行。

0 人点赞