云计算大数据

作者: 笙歌如榆 | 来源:发表于2017-09-22 19:41 被阅读0次

云计算与大数据介绍（非原创）
机器学习介绍
第6章云数据库
阿里大数据技术如何进化？资深技术专家带你回顾
阿里大数据技术如何进化？资深技术专家带你回顾
解读 | 大数据产业园发展前景：风险与机遇并存！
阿里云大数据计算服务MaxCompute（下篇）
阿里云大数据计算服务MaxCompute（上篇）
从零开始搭建企业自己的私有智能物联网云平台
想学大数据？这些误区，你乱入了吗？

云计算和大数据是现在火热的话题，百度怎么说呢，输入搜索词后最开始跳出来的会有一部分广告，在交互方面就做的没有google好，google通过自动爬取和自动标记的方式，可以0.01秒内将几千万条记录显示出来，并且人性化的考虑大部分人的需求，那么问题来了，google是通过什么方式实现的呢。根据北邮的老师刘军老师的分析，我有了更多的认知。google通过pagerank自动标记网站的主要是干什么的，然后再存储上面采用GFS分布式存储，覆盖率高而且准确率高，BigTable结构化的数据存储更是精妙，网页虽然是非结构化的，但是存入链接的名字加上标记后的预处理完的数据已是达到用户的精准需求，当出现数据量比较大的时候，采用高等代数中矩阵的分解成小矩阵的方式分而治之，实现MapReduce，因为通过被引用的次数和引用的对象可以计算网页的权重，多次迭代分权重达到稳定值，就可以知道大多数用户的主要需求啦。当需要计算一个超大矩阵的时候，就需要有几台甚至十几台机器一起运算分解的小矩阵然后合并，那么每台计算机都要有存储和计算的功能，信息的交互也不可避免。今天就只能片面的理解这些了……