问题

用 hbase 存用户日志. 但因为 Phoenix 4.7 没有解析 java.sql.Timestamp 类型, 导致每次扫表效率都很低. 编译完部署之后, 命令行运行正常, 但 zeppelin 报错

java.lang.NoSuchMethodError: io.netty.channel.DefaultFileRegion.

原因

HDP spark 依赖包中有多个版本的 netty, 导致版本冲突.

zeppelin 的 spark interpreter 配置项 dependencies -> exclude 增加
io.netty:netty,io.netty:netty-all.

HDP 2.6 上集成自己编译的 Phoenix 4.7
问题用 hbase 存用户日志. 但因为 Phoenix 4.7 没有解析 java.sql.Timestamp...
centos7 kerberos bug
环境说明： CentOS7.5 , HDP 2.6 ，或者HDP 3.1 HDP ambari 中开启 keber...
beeline 连接报错
环境说明： hdp2.6 集群开了 kerberos , beeline 连接报错，已经kinit 认证通过。...
浅尝HDP2.6
环境准备（单节点伪分布）安装包下载 RedHat 6 / CentOS 6 / Oracle Linux 6 -...
单元测试工具GTest/Gmock（一）
编译安装配置编译工具编译Google Test 需要cmake2.6 版本以及上。yum list | grep...
迅为IMX6Q开发板-QtE4.7编译
7.1.1 QtE4.7 编译器的安装 QtE4.7 的编译器是“iTOP-iMX6 资料汇总（不含光盘内容）\0...
Spark-Streaming Kafka In Kerbero
最近在HDP2.6的环境里尝试了Kerberos，在各组件运行正常的情况下最终成功运行spark-streamin...
HDP 2.6 上配置 Oozie 同时支持 Spark 1.6
需求历史任务基于 Spark1. 新任务计划转移到 Spark2. 需要 Oozie 同时支持两个版本. 步骤 ...
Phoenix集成HBase
一. Phoenix介绍可以把Phoenix理解为Hbase的查询引擎，phoenix，由saleforce.c...
Ambari hdp Spark多版本并存
本示例基于ambari hdp-2.6.0.3（spark2.1.0），集成spark2.2.2，其他的版本思路类...