Zookeeper 简介 Zookeeper是什么？ Zookeeper 是一个分布式协调服务的开源框架。 主要⽤...[作者空间]
综合Hive知识，复习巩固。 需求描述 针对销售数据，完成统计: 按年统计销售额 销售金额在 10W 以上的订单 ...[作者空间]
Impala概述 Impala是什么 Impala是一款针对HDFS和HBASE中的PB级别数据进行交互式实时查询...[作者空间]
Sqoop概述 Sqoop是一款开源的工具，主要用于在Hadoop(Hive)与传统的数据库(mysql、 pos...[作者空间]
基础应用 Flume 支持的数据源种类有很多，可以来自directory、http、kafka等。Flume提供 ...[作者空间]
无论数据来自什么企业，或是多大量级，通过部署Flume，可以确保数据都安全、 及时地到达大数据平台，用户可以将精力...[作者空间]
Hive调优策略 Hive作为大数据领域常用的数据仓库组件，在设计和开发阶段需要注意效率。 影响Hive效率的不仅...[作者空间]
元数据管理与存储 在Hive的具体使用中，首先面临的问题便是如何定义表结构信息，跟结构化的数据 映射成功。所谓的映...[作者空间]
HQL操作之-DML命令 数据操纵语言DML(Data Manipulation Language)，DML主要有...[作者空间]
函数 内置函数 时间函数 字符串函数 数学函数 条件函数 UDTF函数 表生产函数，一行输入，多行输出。将一行中复...[作者空间]
HQL操作之DQL命令 基本查询 where 子句 Where 子句不能使用列的别名 备注:通常情况下NULL不参...[作者空间]
HQL操作之数据操作 数据导入 LOCAL :load data local ：从本地加载数据,本地文件会拷贝到H...[作者空间]
HQL操作之-DDL命令 参考:https://cwiki.apache.org/confluence/displ...[作者空间]
Hive数据类型和文件格式 Hive支持关系型数据库的绝大多数基本数据类型和4和几个集合 隐似转换 显示转换： 集...[作者空间]
Hive安装与配置 Hive安装配置 Hive官网：http://hive.apache.org[http://h...[作者空间]
数据仓库工具Hive Hive产生背景 直接使用MapReduce处理大数据，问题： MapReduce开放难度大...[作者空间]
扩展Hadoop 3.x新特性概述 Hadoop3.x中增强了很多特性，在Hadoop3.x中，不再允许使用jdk...[作者空间]
Yran架构 ResourceManager（rm）：处理客户端请求，启动/监控ApplicationMaster...[作者空间]
MapReduce 思想：分而治之 Map(分):在分的阶段，我们只需要提供Map阶段的逻辑就好，不需要关心原始数...[作者空间]
HDFS重要概念 典型的Master/Slave架构HDFS往往是由一个NameNode（HA架构会有两个Name...[作者空间]
