美文网首页
DB-ETL-DW-OLAP-DM-BI关系结构解释

DB-ETL-DW-OLAP-DM-BI关系结构解释

作者: 纵横叹 | 来源:发表于2019-07-18 19:13 被阅读0次

在此大概用口水话简单叙述一下他们几个概念:

(1)DB/Database/数据库——这里一般指的就是OLTP数据库,在线事物数据库,用来支持生产的,比如超市的买卖系统。DB保留的是数据信息的最新状态,只有一个状态!比如,每天早上起床洗脸照镜子,看到的就是当时的状态,至于之前的每天的状态,不会出现的你的眼前,这个眼前就是db。

(2)DW/Data Warehouse/数据仓库——这里保存的是DB中的不同时间点的状态,比如,每天早上洗完照镜子时,都拍一张照片,天天这样,这些照片放入到一个相册中,之后就可以查看每一天的状态了,这个相册就是数据仓库,他保存的是数据在不同时间点的状态,对同一个数据信息,保留不同时间点的状态,就便于我们做统计分析了。

(3)ETL/Extraction-Transformation-Loading——用于完成DB到DW的数据转存,它将DB中的某一个时间点的状态,“抽取”出来,根据DW的存储模型要求,“转换”一下数据格式,然后再“加载”到DW的一个过程,这里需要强调的是,DB的模型是ER模型,遵从范式化设计原则,而DW的数据模型是雪花型结构或者星型结构,用的是面向主题,面向问题的设计思路,所以DB和DW的模型结构不同,需要进行转换。

(4)OLAP——在线分析系统,简单说就是报表系统,销售报表,统计报表,等等,这个大家都熟悉,当然,OLAP的统计要更复杂更丰富一些,比如切面,钻取等等。

(5)DM/Data Mining/数据挖掘——这个挖掘,不是简单的统计了,他是根据概率论的或者其他的统计学原理,将DW中的大数据量进行分析,找出我们不能直观发现的规律,比如,如果我们每天早上照相,量身材的时候,还记录下头一天吃的东西,黄瓜,猪腿,烤鸭,以及心情,如果记录上10年,形成了3650天的相貌和饮食心情的数据,我们每个人都记录,有20万人记录了,那么,我们也许通过这些记录,可以分析出,身材相貌和饮食的客观规律;再说一个典型的实例,就是英国的超市,在积累了大量数据之后,对数据分析挖掘之后,得到了一个规律:将小孩的尿布和啤酒放在一起,销量会更好——业务专家在得到该结论之后,仔细分析,知道了原因,因为英国男人喜欢看足球的多,老婆把小孩介绍男人看管,小孩尿尿需要尿布,而男人看足球喜欢喝酒,所以两样商品有密切的关系,放在一起销售会更好!

(6)BI/Business Intelligence/商业智能——领导,决策者,在获取了OLAP的统计信息,和DM得到的科学规律之后,对生产进行适当的调整,比如,命令超市人员将啤酒喝尿布放在一起销售,这就反作用于DB修改存货数据了——这就是整个BI的作用!

相关文章

  • DB-ETL-DW-OLAP-DM-BI关系结构解释

    在此大概用口水话简单叙述一下他们几个概念: (1)DB/Database/数据库——这里一般指的就是OLTP数据库...

  • ISM解释结构模型——研究系统结构关系情况

    一、解释结构模型ISM介绍 ISM(解释结构模型,Interpretative Structural Modeli...

  • 数据结构和算法

    思维导图如下 一、数据结构核心名称解释 1.逻辑结构:数据的逻辑结构是指数据元素之间的逻辑关系描述。根据数据元素之...

  • 数据结构概念(20190116)

    数据结构概念(20190116) 个人理解,非权威解释。 数据结构 数据元素之间存在一种或多种特定的关系的集合 逻...

  • JVM结构解释

    每个Java开发人员都知道字节码将被执行JRE(Java运行时环境)。 但很多人并不知道这一事实JRE的实现Jav...

  • 利率期限结构

    利率期限结构理论 利率期限结构:不同到期期限债券利率之间的关系,通常用收益率曲线来描述。 利率期限理论解释三个事实...

  • T-SQL基础(一)之简单查询

    名词解释 SQL: Structured Query Language,结构化查询语言,是一种在关系型数据库中用于...

  • Coroutines中的Structured concurren

    Coroutine scope负责在不同的coroutine之间形成结构化和父-子关系(这里有点抽象,稍后会解释什...

  • 2021-06-30 数据结构和算法概述

    1.1什么是数据结构? 官方解释: 数据结构是一门研究非数值计算的程序设计问题中的操作对象,以及他们之间的关系和操...

  • 日志关系解释

    1. 日志组成模式分析 日志分为一般 抽象层和实现层抽象层有 slf4j jboss4j等等,这里一般使用slf4...

网友评论

      本文标题:DB-ETL-DW-OLAP-DM-BI关系结构解释

      本文链接:https://www.haomeiwen.com/subject/xpsrlctx.html