写在前面 台风夜的电话面试里被问到了spark运行任务的过程中stage的划分依据。一下子就给整懵了,支支吾吾答非...[作者空间]
with...as...也叫做子查询部分,语句允许hive定义一个sql片段,供整个sql使用 简介 with.....[作者空间]
Kafka中的每个partition都由一系列有序的、不可变的消息组成,这些消息被连续的追加到partition中...[作者空间]
简介 NameNode 负责响应客户端请求。负责管理元数据(文件名、副本数、Block存放的DN)。 DataNo...[作者空间]
1. 创建conf和table 2. 通过SparkAPI读取数据 返回的数据是一个ImmutableBytesW...[作者空间]
一、避免null的使用 大多数语言都有一个特殊的关键字或者对象来表示一个对象引用的是“无”,在Java,它是nul...[作者空间]
HBase版本:1.2.6Hive版本:1.2.1 1. 把HIVE_HOME/lib/hive-hbase-ha...[作者空间]
在Spark SQL 编程时,经常需要对获取的DataFrame 对象进行map 操作。map 基于的元素是Row...[作者空间]