美文网首页
Hive-ES配置实例

Hive-ES配置实例

作者: YG_9013 | 来源:发表于2017-10-13 14:15 被阅读0次

配置过程如下:

1)添加jar包

    add jar file:///path/to/elasticsearch-hadoop-hive-5.2.0.jar;

2)创建一个hive-es对应表

create external table tmp.es_guo_test(
    imp_date string,
    group_code string,
    member_uin string,
    uin_flag bigint,
    ex_flag bigint,
    ower_flag bigint,
    xx_flag bigint
)STORED BY 'org.elasticsearch.hadoop.hive.EsStorageHandler'
TBLPROPERTIES('es.nodes'='xxx','es.port'='9200','es.index.auto.create'='true','es.resource'='customer/guo_test','es.nodes.wan.only'='true');
  1. 向外部表中导数据,则数据会自动写入ES中
  insert overwrite table tmp.es_guo_test select imp_date,group_code,member_uin from tmp.guo_test where dt=20170813 limit 3000;

现在,查看ES索引,自动创建了customer索引,且有3000条数据。

相关文章

  • Hive-ES配置实例

    配置过程如下: 1)添加jar包 2)创建一个hive-es对应表 向外部表中导数据,则数据会自动写入ES中 现在...

  • 玩转nginx

    本文内容包括: nginx配置实例之反向代理; nginx配置实例之动静分离; nginx配置实例之负载均衡; n...

  • fly-请求配置&拦截器

    请求配置 实例级配置:对fly实例发起的所有请求都有效 单次请求配置:只对当次请求有效 可配置项 通用项:所有环境...

  • nginx.conf配置

    实例1: 实例2:nginx支持php网页 实例3:nginx配置静态网页 实例4:nginx负载 实例5:实现同...

  • zookeeper

    简介 配置 node1上操作单实例 集群配置 测试

  • SQL Server 2014 Express安装教程

    实例配置指定SQL Server 实例的名称和实例ID,实例Id将成为安装路径的一部分实例作用所谓“SQL实例”,...

  • MySQL用户管理

    MySQL多实例 1.什么是实例? 2.什么是多实例? 多个配置文件: 1.创建配置文件存放目录 2.准备不同的配...

  • 使用spring restTemplate发起http请求

    restTemplate java 配置 post请求实例

  • MySql的my.ini文件

    # MySQL服务实例配置文件 # ---------------------------------------...

  • Ubuntu 20.10 Redis集群-单机启动多实例

    启动已配置好的redis实例

网友评论

      本文标题:Hive-ES配置实例

      本文链接:https://www.haomeiwen.com/subject/ixyzyxtx.html