topic相当于是一个队列，每条消息必须指定发送哪个队列。 为了使kafka的吞吐率能水平扩展，物理上把topic分成 一个或多个partition，每个partition对应一个文件夹，存储所有这个partition的消息和索引文件。...

HBase 主要用ZooKeeper来实现 HA 选举与主备集群主节点的切换、系统容错、meta-region 管理、Region 状态管理和分布式 SplitWAL 任务管理等。

回顾一下kafka相关的概念：

ReplacingMergeTree引擎简介：该引擎和 MergeTree 的不同之处在于它会删除排序键值相同的重复项。数据的去重只会在数据合并期间进行。合并会在后台一个不确定的时间进行，因此你无法预先作出计划。有一些数据可能仍未被...

2：启动服务运行kafka需要使用zookeeper，所以你需要先启动zookeeper，如果你没有zookeeper，你可以使用kafka自带打包和配置好的zookeeper。启动命令如下：

这一期首先聊聊 Kafka 数据同步到 ClickHouse 的其中一个方案：通过 Kafka 引擎方式同步，下面进入实际操作过程（环境：CentOS7.4）：

2018年第一天，许下第一份愿望吧，闭上眼睛，双手合十，心中默念，梦想成真。有期待的生活是快乐的，有憧憬的日子是惊喜的。元旦快乐!

ZooKeeper作为分布式协调组件，在大数据领域的其他分布式组件中往往扮演着重要的辅助角色，因此我们就算不单独去研究ZooKeeper，也短不了要接触它。本文就以最典型的HBase为例，简要介绍ZooKeeper为HBase提供了哪些功能。...

当然很多小伙伴都有在开发中使用的经验，就没必要再搭建一个 Demo 了，在源码里官方也提供了 Demo，这里直接构建源码阅读环境。

1.1 ：配置免密登录（各集群节点间，互相操作对方时，只需要输入对方ip或者host即可，不需要输入密码，即：免密登录）