美文网首页
15.3 hive与mysql的集成

15.3 hive与mysql的集成

作者: 6cc89d7ec09f | 来源:发表于2018-02-14 13:27 被阅读14次
图片.png 图片.png 图片.png

hive连接mysql数据库需要的驱动包,此包到网上下载


图片.png

测试

图片.png

hiveSQL是基于mapreduce和yarn的,所以yarn进程必须启动

建表语句说明:row format delimited fields terminated by '\t'
每行的分割标识为'\t'

登录mysql,到metastore库里查询刚才创建的表

select * from TBLS

为了查询时,显示列名,可以继续在hive-site.xml中配置.

图片.png

这些参数都可以在hive-default.xml中找到,copy

最后的的配置

<property>
    <name>javax.jdo.option.ConnectionURL</name>
    <value>jdbc:mysql://bigdata-pro03.kfk.com/metastore?createDatabaseIfNotExist=true</value>
  </property>

  <property>
    <name>javax.jdo.option.ConnectionDriverName</name>
    <value>com.mysql.jdbc.Driver</value>
  </property>

  <property>
    <name>javax.jdo.option.ConnectionUserName</name>
    <value>root</value>
  </property>

  <property>
    <name>javax.jdo.option.ConnectionPassword</name>
    <value>123456</value>
  </property>

  <property>
    <name>hive.cli.print.header</name>
    <value>true</value>
  </property>

  <property>
    <name>hive.cli.print.current.db</name>
    <value>true</value>
  </property>

  <property>
      <name>hbase.zookeeper.quorum</name>
      <value>bigdata-pro01.kfk.com,bigdata-pro02.kfk.com,bigdata-pro03.kfk.com</value>
  </property>

相关文章

  • 15.3 hive与mysql的集成

    hive连接mysql数据库需要的驱动包,此包到网上下载 测试 hiveSQL是基于mapreduce和yarn的...

  • Hive的常用配置及错误处理

    常用配置记录 安装指定版本的MySQL 在Hive与MySQL的集成过程中,如果想通过yum源来安装MySQL,在...

  • Hive是什么?

    Hive与MySQL的区别Hive与MySQL的区别[https://blog.csdn.net/qq_39597...

  • 尚硅谷大数据技术之HBase

    6.4 与Hive的集成6.4.1 HBase与Hive的对比1.Hive(1) 数据仓库Hive的本质其实就相当...

  • 21 sparkSQL

    sparkSQL服务架构 sparkSQL与Hive集成 1需要配置的项目 1、拷贝hive的配置文件 Hive-...

  • SparkSQL操作外部数据源

    parquet数据 hive表数据 mysql表数据 hive与mysql结合 1.处理parquet数据 启动s...

  • hive--》MySQL,不同名,不同列

    1.hive--》MySQL 从目标机上建立与hive表结构类似的MySQL数据库表: 切换数据库: [root@...

  • Hive与MySQL的不同之GROUP BY

    Hive与MySQL的不同之GROUP BY Hive: DESC city_info0 city_id st...

  • Hive安装

    卸载原有mysql mysql 安装 hive 安装 文件配置 hive-site.xml 下载mysql驱动包 ...

  • HBase 与Hive的集成

    HBase与Hive的对比 Hive 数据仓库Hive的本质其实就相当于将HDFS中已经存储的文件在Mysql中做...

网友评论

      本文标题:15.3 hive与mysql的集成

      本文链接:https://www.haomeiwen.com/subject/aldetftx.html