zl程序教程

您现在的位置是:首页 >  其他

当前栏目

CDH5之时钟偏差问题

2023-04-18 16:57:17 时间

CDH5之时钟偏差问题

一、介绍

主机时钟偏差的问题,是分布式中各个主机之间存在系统时差,或者和ntp服务器的时间不同步造成的。如果集群之中没有配置ntp服务,那么时钟偏差会非常频繁,如下图:

由上图可由看出,这个问题的严重性,如果你配置了邮件预警,那么恭喜你,几分钟之内你的接收邮箱将要爆炸,但是这个问题也不严重,所以很烦人。

要解决这个问题,有两个方法:

  • 其一,修改CDH中主机的ntp偏差值,将这个值变大,增加容错。可见其治标不治本。
  • 其二,增加ntp服务,在集群中配置ntp服务,用来进行集群的时间同步。

二、解决方法

1、修改主机配置

在CDH的web管理页面中,点击主机,选择所有主机,到达主机显示界面。

由于这个配置是针对每个主机的,所以如果你要是跟配置邮件预警一样去Cloudera Management Service界面找的话,你会一无所获。

如下图,进入主机显示界面之后,点击主机名称,进入主机详情页面。

进入主机页面之后,选择配置,在搜索框中输入ntp,就能找到主机时钟偏差的控制项了,根据情况修改就行了,如下图:

这个方法需要修改所有主机的配置,CDH集群中有多少台服务器,就需要修改多少台服务器。 当然,也可以那台服务器报错了,修改那台。

2、配置ntp服务

时钟偏差的问题,从根本上解决,还是要配置ntp服务器,这样就可以从根本上解决问题了。

配置ntp服务器,请参见ntp服务搭建

配置ntp服务器的时候,个人建议,最好配置成本地的,不要去访问公网上提供的ntp服务器,还有,配置之前,将CDH的相关服务提前进行关闭。