美文网首页
Hadoop理论知识

Hadoop理论知识

作者: 夙夜M | 来源:发表于2017-08-25 20:22 被阅读0次

    1、hadoop的概念:分布式文件存储和计算框架

    hdfs:使用分布式思想存储海量数据

    MapReduce:分布式计算程序的编程框架

    2、hadoop的副本存放策略

    上传和下载底层原理

    3、hive的概念

    hive是由Facebook实现并开源的一款基于hadoop的类SQL数据仓库工具,

    使用HQL查询功能将结构化的数据映射为一张数据库表,底层数据存储在hdfs,

    Hive的本质是将HQL语句转化为MR任务运行,使不熟悉MapReduce的用户能够根据HQL语句进行数据ETL操作。

    4、zookeeper的选举算法

    相关文章

      网友评论

          本文标题:Hadoop理论知识

          本文链接:https://www.haomeiwen.com/subject/eetkdxtx.html