2021年大数据Kafka(七):Kafka的分片和副本机制

2021-10-11 16:23:31 浏览数 (2)

Kafka的分片和副本机制

一、分片机制

主要解决了单台服务器存储容量有限的问题

当数据量非常大的时候,一个服务器存放不了,就将数据分成两个或者多个部分,存放在多台服务器上。每个服 务器上的数据,叫做一个分片

二、副本机制

副本备份机制解决了 数据存储的高可用 问题

当数据只保存一份的时候,有丢失的风险。为了更好的容错和容灾,将数据拷贝几份,保存到不同的机器上。

三、总结

分片: 解决单台节点存储容量有限的问题, 通过分片进行分布式存储方案 副本: 保证数据不丢失, 提升数据可用性