Kafka - 错误记录
cannot allocate memory
日志描述:
代码语言:javascript复制// Java运行时环境的内存不足,无法继续运行。
## There is insufficient memory for the Java Runtime Environment to continue.
// 1073741824刚好是1G, 这句话的意思是本机内存分配未能为提交保留内存分配1G内存。
# Native memory allocation (malloc) failed to allocate 1073741824 bytes for committing reserved memory.
解决方案:
从这两行提示信息来看,应该是内存不够,经过百度,发现是kafka默认启动内存是1G, 而JVM默认内存也是1G, JVM自然不能所有内存都分配给kafka, 所以kafka就启动不了,解决方法是把kafka的最小启动内存设置为小于1G的值,即把kafka-server-start.sh中把’export KAFKA_HEAP_OPTS=”-Xmx1G -Xms1G”‘中的Xms设置为256M, 这样,kafka最小只需要256M即可启动。
重启kafka服务。
Executing consumer group command failed due to Request METADATA failed on brokers List(ubuntu:9092 (id: -1 rack: null))
日志描述:
运行bin/kafka-consumer-groups.sh --bootstrap-server localhost:9092 --list
触发的错误日志。消费者团体执行命令失败由于请求元数据失败的经纪人名单上。
解决方案:
查看server.properties zookeeper的配置信息。调整成正确的YOUR_IP_ADDRESS即可。bin/kafka-consumer-groups.sh --bootstrap-server YOUR_IP_ADDRESS:9092 --list
参考资料
- 启动kafka提示OOM异常,cannot allocate memory
- KafkaConsumer 长时间地在poll(long )方法中阻塞