美文网首页大数据
测试ClickHouse中写入Parquet格式数据到Hive

测试ClickHouse中写入Parquet格式数据到Hive

作者: 代码足迹 | 来源:发表于2021-04-27 19:54 被阅读0次

先在HDFS创建目录

hdfs dfs -mkdir -p /user/hive/warehouse/test.db/hdfsParquet/

在CK创建表

create table hdfsParquet(id Int16,name String)
 engine=HDFS('hdfs://node1:8020/user/hive/warehouse/test.db/hdfsParquet/a.Parquet','Parquet');
  

创建CK表成功

insert into hdfsParquet values(1,'zhangsan');

写入成功,

到HDFS上查看一下

hdfs dfs -text /user/hive/warehouse/test.db/hdfsParquet/a.Parquet
image.png

看到数据啦

创建HIVE表关联刚刚的文件

drop table if exists hdfsParquet;
create external table if not exists hdfsParquet (
 id   int ,
 name string
)
stored as parquet
location '/user/hive/warehouse/test.db/hdfsParquet';

执行查询语句

select * from hdfsParquet;

image.png

数据出来啦!!

相关文章

网友评论

    本文标题:测试ClickHouse中写入Parquet格式数据到Hive

    本文链接:https://www.haomeiwen.com/subject/fmuprltx.html