HIVE数据迁移2

版权声明：本文为博主原创文章，未经博主允许不得转载。https://www.jianshu.com/p/c1cb15521492

第一步：老集群节点上查看建表语句

第二步：在新集群hive上建库建表

注意location位置的命名空间要与新集群namenode的"Quorum Journal 名称"参数保持一致

此时在新集群通过hive查询，数据为空

第三步，拷贝数据

hadoop distcp -Ddfs.checksum.type=CR32C-log /tmp/discp2.txt -bandwidth 300

hdfs://19.126.68.31:8020/user/dw_scpas/hive/acscpdb/tbl_acscp_phone_day_cnt/hn_settle_dt=20190421hdfs://19.121.1.26:8020/user/bdhscpas/db/acscpdb/tbl_acscp_phone_day_cnt/hn_settle_dt=20190421

第四步：同步源数据信息metadata

msck repair table tbl_acscp_phone_day_cnt;

验证：