一、大数据是什么?
大数据，big data，《大数据》一书对大数据这么定义，大数据是指不能用随机分析法(抽样调查)这样捷径，而采用所有数据进行分析处理。
这句话至少传递两种信息：
1、大数据是海量的数据
2、大数据处理无捷径，对分析处理技术提出了更高的要求
二、大数据的处理流程
下图是数据处理流程：
1、底层是数以千亿计的数据源，数据源可以是SCM(供应链数据)，4PL(物流数据)，CRM(客户数据)，网站日志以及其他的数据
2、第二层是数据加工层，数据工程师对数据源按照标准的统计口径和指标对数据进行抽取、清洗、转化、装载(整个过程简称ELT)
3、第三层是数据仓库，加工后的数据流入数据仓库，进行整合和存储，形成一个又一个数据集市。
数据集市，指分类存储数据的集合，即按照不同部门或用户的需求存储数据。
4、第四层是BI(商业智能)，按照业务需求，对数据进行分析建模、挖掘、运算，输出统一的数据分析平台
5、第五层是数据访问层，对不同的需求方开放不同的数据角色和权限，以数据驱动业务。
大数据的量级，决定了大数据处理及应用的难度，需要利用特定的技术工具去处理大数据。
六道网大数据工具以服务技术为驱动力，将有价值的后台管理系统、多维度数据变为资源，通过自主查询的个性化定义，将各种能力通过服务赋予机构端用户，完成用户业务的效率提升和数据决策价值
在不久的将来，多智时代一定会彻底走入我们的生活，有兴趣入行未来前沿产业的朋友，可以留心多智时代，及时获取人工智能、大数据、云计算和物联网的前沿资讯和基础知识，让我们一起携手，引领人工智能的未来！
网友评论