HBase填坑记2:Region无故损坏

2021-01-20 11:59:40 浏览数 (1)

HBase的Region损坏后果很严重,会导致整个HBase异常,数据不能用。修复Region需要花费时间,当出现大面积的Region损坏的时候,后果几乎是致命的。

这里会详细讲解我们在开发过程中发现的Region损坏情况和解决思路。

问题描述:我们在做大量数据写入的时候,突然发生Region Server重启,重启后,出现大量的Region损坏,下面是检查发现的问题。

通过分析,首先确认导致Region Server重启的原因,应该就是Full GC导致的,当时正在做大量的写入,QPS非常高,整体内存使用率也很高,这本身就容易导致RS重启。

另外,我们发现我们每台Region Server的Region个数非常大,超过1000个。

0 人点赞