美文网首页大数据与人工智能
大数据来了,统计学彻底完了?

大数据来了,统计学彻底完了?

作者: 小喵和小汪 | 来源:发表于2017-07-17 11:38 被阅读0次

统计学是一门很古老的科学,也是很重要的学科。

统计学是通过搜索、整理、分析、描述数据等手段,以达到推断所测对象的本质,甚至预测对象未来的一门综合性科学。

统计学的中心问题就是如何根据样本去探求有关总体的真实情况。在过去,我们数据有限,算力有限,统计学的作用就很重要。

伴随着信息化,我们获得的数据量越来越大,我们的计算能力越来越强,统计学的历史使命似乎要达到终结。

大数据时代,我们可以获得全样本,大数据时代,我们可以有不同的方法去处理数据,去了解样本的方方面面。相比较统计学,样本规范,总量数据有限,观测目标单一,这种情况下,统计学是适用的。然而,数据过大的情况,比如是网络海量数据,你如何取样,你如何观测呢?

大数据的特征之一是多样性,不同来源、不同维度的数据之间存在一定的关联度,可以交叉验证,运用大数据做决策,决就能够从粗放型转向集约型。

这么说来,统计学似乎就没有价值了?

大数据是全样本,然而一些数据并不是有很大价值,甚至会出现错误导向。

谷歌的创始人拉里.佩奇和谢尔盖.布林,在面试的时候,会要应聘者大学的SAT成绩及大学毕业时的平均成绩。

然而,每次那些40多岁,成就斐然的职业经理人被问到成绩,就很懵逼。

他们的依据是:SAT能彰显天赋,大学平均成绩则能体现成就。

工作表现和这些成绩有关系吗?没关系。

这个数据虽然是全数据,但仍然具有不确定性。

大数据告知信息但不解释信息,这是大数据相关关系的特性。

就像股票市场,即使把所有的数据都公布出来,不懂的人依然不知道数据代表的信息。大数据时代,统计学依然是数据分析的灵魂。正如加州大学伯克利分校迈克尔·乔丹教授指出的,“没有系统的数据科学作为指导的大数据研究,就如同不利用工程科学的知识来建造桥梁,很多桥梁可能会坍塌,并带来严重的后果。”

在大数据时代,我们不能忽视一些新的方法和思想,但是,数据分析的很多根本性问题和小数据时代并没有本质区别。

相关文章

  • 大数据来了,统计学彻底完了?

    统计学是一门很古老的科学,也是很重要的学科。 统计学是通过搜索、整理、分析、描述数据等手段,以达到推断所测对象的本...

  • 彻底完了

    一个完好的心破裂 一切都不再留 错到不可原谅 付出那么多却不对等 不配拥有 那晚我犹豫 多次最后一晚告诉我是矛盾的...

  • 数据探索之参数估计

    统计学有两大主要分支,分别是描述性统计学和推断统计学。描述性统计学用于描述和概括数据的特征以及绘制各类统计图表。总...

  • 读博士是为了什么

    讲讲在美国的统计学博士就业。 最近几年统计迎来了黄金发展期,数据量和计算能力的爆炸式提高给统计学家带来了很多挑战,...

  • 统计

    自选课程-统计学可汗学院统计学 定义 统计学是在数据分析的基础上,研究测定、收集、整理、归纳和分析反映数据数据,以...

  • 《统计学习方法-第2版》第1章 概论

    1.1 统计学习 统计学习的特点统计学习(statistical learning):是关于计算机基于数据构建概率...

  • 《统计学习方法》笔记(一):统计学习方法概论

    统计学习 统计学习的特点 以计算机及网络为平台 以数据为研究对象 目的是对数据进行预测和分析 以方法为中心(统计学...

  • 李航统计学习方法(一)

    1、特点 统计学习以数据为研究对象(数据驱动),以方法为中心,目的是为了对数据进行预测与分析。 2、方法 统计学习...

  • 统计学习:现代机器学习

    统计学习 统计学习是关于计算机基于数据构建概率统计模型并运用模型对数据进行预测与分析的一门学科,统计学习也称为统计...

  • 统计学习方法概论

    统计学习 统计学习是关于计算机基于数据构建概率统计模型并运用模型对数据进行预测与分析的一门学科。统计学习也称为统计...

网友评论

    本文标题:大数据来了,统计学彻底完了?

    本文链接:https://www.haomeiwen.com/subject/sfkfkxtx.html