美文网首页大数据程序员
大数据||hadoop集群的时间同步

大数据||hadoop集群的时间同步

作者: 明明德撩码 | 来源:发表于2018-02-23 16:42 被阅读146次

各大银行、证券、通讯集群内部时间同步,找一台机器作为时间基准,其他机器同步一次时间。

时间服务器配置

检测是否安装ntp工具

rpm -qa|grep ntp


修改vi /etc/ntp.conf

  • 开启#restrict 192.168.1.0 mask 255.255.255.0 nomodify notrap并把192.168.1.0修改为192.168.57.0
    去掉注解(本地网络上的主机限制较少。)
  • 注释掉网络同步时间

Please consider joining the pool
server 0.centos.pool.ntp.org
server 1.centos.pool.ntp.org
server 2.centos.pool.ntp.org

  • 去掉注释 无纪律的本地时间。
    当没有外部时间源时,对本地时间进行备份。

  • 总体修改图


    image.png

开启主同步时钟

  • 命令:vi /etc/sysconfig/ntpd

在此文件中新增: SYNC_HWCLOCK=yes


  • 修改 vi /etc/sysconfig/ntpdate


  • 查看ntpd服务是否启动(时间同步服务)

    service ntpd status


  • 启动

service ntpd start


  • 随系统一起启动
chkconfig ntpd on

被同步的服务节点(132/133节点服务器)编写时间同步脚本(计划任务)

linux|计划任务

-crontab -e
0-59/10 * * * * /usr/sbin/ntpdate hadoop-senior.beifeng.com
说明:每10分钟在131服务器上同步一次时间。


133服务器
132服务器

相关文章

  • 好程序员大数据分享Hadoop干货:Hadoop集群搭建

    好程序员大数据分享Hadoop干货:Hadoop集群搭建 安装时间同步 Yum install -y ntpdat...

  • 大数据||hadoop集群的时间同步

    各大银行、证券、通讯集群内部时间同步,找一台机器作为时间基准,其他机器同步一次时间。 时间服务器配置 检测是否安装...

  • hadoop集群时间同步

    同步方式 选择一个机器,作为时间服务器(这里选择hadoop01),所有的机器与这台集群时间进行定时的同步,比如,...

  • hadoop集群时间同步

    当前搭建的hadoop分布式情况如上表所示,现在把bigdata作为时间服务器,其他两台节点定时同步bigdata...

  • hadoop集群时间同步

    192.168.217.130 master master.hadoop 192.168.217.131 node...

  • hdfs文件迁移

    hadoop跨集群之间迁移HDFS数据 不同hadoop集群之间迁移hive数据 hadoop跨集群之间迁移hiv...

  • 大数据技术学习分享:Hadoop集群同步

    给大家带来的技术分享是——Hadoop集群同步。 一、同步方式 选择一个机器,作为时间服务器(这里选择hadoop...

  • 搭建时间服务器并配置集群自动时钟同步

    搭建时间服务器并配置集群自动时钟同步 一、搭建时间服务器 (一)为什么要搭建时间服务器 因为Hadoop 对集群...

  • hadoop集群 distcp 缓慢 两个hadoop集群之间使用distcp拷贝时,发现集群之间拷贝数据缓慢,最...

  • 大数据集群搭建2

    大数据集群搭建 本文档将搭建以下集群 hadoop 集群 zookeeper 集群 hbase 集群 spark ...

网友评论

    本文标题:大数据||hadoop集群的时间同步

    本文链接:https://www.haomeiwen.com/subject/jfrxxftx.html