CDH5之时钟偏差问题
一、介绍
主机时钟偏差的问题,是分布式中各个主机之间存在系统时差,或者和ntp服务器的时间不同步造成的。如果集群之中没有配置ntp服务,那么时钟偏差会非常频繁,如下图:
由上图可由看出,这个问题的严重性,如果你配置了邮件预警,那么恭喜你,几分钟之内你的接收邮箱将要爆炸,但是这个问题也不严重,所以很烦人。
要解决这个问题,有两个方法:
- 其一,修改CDH中主机的ntp偏差值,将这个值变大,增加容错。可见其治标不治本。
- 其二,增加ntp服务,在集群中配置ntp服务,用来进行集群的时间同步。
二、解决方法
1、修改主机配置
在CDH的web管理页面中,点击主机,选择所有主机,到达主机显示界面。
由于这个配置是针对每个主机的,所以如果你要是跟配置邮件预警一样去Cloudera Management Service界面找的话,你会一无所获。
如下图,进入主机显示界面之后,点击主机名称,进入主机详情页面。
进入主机页面之后,选择配置,在搜索框中输入ntp,就能找到主机时钟偏差的控制项了,根据情况修改就行了,如下图:
这个方法需要修改所有主机的配置,CDH集群中有多少台服务器,就需要修改多少台服务器。 当然,也可以那台服务器报错了,修改那台。
2、配置ntp服务
时钟偏差的问题,从根本上解决,还是要配置ntp服务器,这样就可以从根本上解决问题了。
配置ntp服务器,请参见ntp服务搭建。
配置ntp服务器的时候,个人建议,最好配置成本地的,不要去访问公网上提供的ntp服务器,还有,配置之前,将CDH的相关服务提前进行关闭。