美文网首页
[ITSTAR]第三课:Hadoop的背景起源二:MapRedu

[ITSTAR]第三课:Hadoop的背景起源二:MapRedu

作者: Reaq | 来源:发表于2018-01-21 15:05 被阅读0次

MapReduce模型:

MapReduce模型.png

MapReduce基础编程模型:

MapReduce基础编程模型.png

PageRank(搜索排名):

详细内容:

一、什么是大数据,本质?
    (1)数据的存储:分布式文件系统(分布式存储)-----> HDFS: Hadoop Distributed File System
    (2)数据的计算:分布式计算
    
二、如何解决大数据的计算?分布式计算
    (1)什么是PageRank(MapReduce的问题的来源)
        (*) 搜索排名
    
    (2)MapReduce(Java语言实现)基础编程模型: 把一个大任务拆分成小任务,再进行汇总
        (*) 更简单一点例子

相关文章

网友评论

      本文标题:[ITSTAR]第三课:Hadoop的背景起源二:MapRedu

      本文链接:https://www.haomeiwen.com/subject/enofaxtx.html