美文网首页
数据标准概述

数据标准概述

作者: 貳條 | 来源:发表于2020-05-16 15:26 被阅读0次

数据标准概述

数据标准是进行数据标准化的主要依据,构建一套完整的数据标准体系是开展数据标准管理工作的良好基础,有利于打通数据底层的互通性,提升数据的可用性。本章从数据标准的概念入手,多角度探讨数据标准的内涵,构建数据标准分类体系,并阐述了数据标准作为数据资产管理核心要素的重要性。

(一) 数据标准的内涵

数据标准(Data Standards)是指保障数据的内外部使用和交换的一致性和准确性的规范性约束。在数字化过程中,数据是业务活动在信息系统中的真实反映。由于业务对象在信息系统中以数据的形式存在,数据标准相关管理活动均需以业务为基础,并以标准的形式规范业务对象在各信息系统中的统一定义和应用,以提升企业在业务协同、监管合规、数据共享开放、数据分析应用等各方面的能力。

“数据标准”并非是一个专有名词,而是一系列“规范性约束”的抽象。但是,数据标准的具体形态通常是一个或多个数据元的集合,即数据元是数据标准的基本单元。每一个数据元应由数据元中文名称、数据元英文名称、数据元标识符、说明、数据类型、取值、IMIX 域名七个属性组成,每一个数据元属性的描述包括该属性的注释以及相关标准规则。

数据元示例-银行间市场基础数据元属性及其描述

(二) 数据标准分类

数据标准是进行数据标准化、消除数据业务歧义的主要参考和依据。对数据标准进行分类,将有利于数据标准的编制、查询、落地和维护。
数据标准有多种分类方式,对于不同的分类方式,均可采用以数据元为数据标准制定的基本单元构建数据标准体系。
数据可以分为基础类数据和指标类数据。

  • 基础类数据:指业务流程中直接产生的,未经过加工和处理的基础业务信息。
  • 指标类数据:是指具备统计意义的基础类数据,通常由一个或以上的基础数据根据一定的统计规则计算而得到。

相应地,数据标准也可以分为基础类数据标准或指标类数据标准。

  • 基础类数据标准:是为了统一企业所有业务活动相关数据的一致性和准确性,解决业务间数据一致性和数据整合,按照数据标准管理过程制定的数据标准。
  • 指标类数据标准:一般分为基础指标标准和计算指标(又称组合指标)标准。基础指标具有特定业务和经济含义,且仅能通过基础类数据加工获得,计算指标通常由两个以上基础指标计算得出。

并非所有基础类数据和指标类数据都应纳入数据标准的管辖范围。数据标准管辖的数据,通常只是需要在各业务条线、各信息系统之间实现共享和交换的数据,以及为满足监控机构、上级主管部门、各级政府部门的数据报送要求而需要的数据。

在基础类数据标准和指标类数据标准这个框架下,可以根据各自的业务主题进行细分。细分时应尽可能做到涵盖企业的主要业务活动,且涵盖企业生产系统中产生的所有业务数据。

基础类数据标准和指标类数据标准通过分别建立基础类数据元和指标类数据元,并将基础类数据元和指标类数据元与数据映射,实现基础类数据标准和指标类数据标准的落地。具体来说,对于结构化数据中的任意一个字段,当其不具备指标特征时,可直接将其与某一业务类别下的基础类数据元(如包含命名规则、数据类型和值域等属性)映射,实现该字段的标准化(符合命名规则、数据类型和值域的规定);当其具备指标特征时,可直接将其与某一业务类别下的指标类数据元(如命名规则、约束规则、数据类型和值域等)映射,实现该字段的标准化(符合命名规则、约束规则、数据类型和值域的规定)。

(三) 数据标准在数据资产管理中的作用

数据标准从多个方面支撑企业的数字化转型。在业务方面,数据标准能够明确很多业务含义,使得业务部门之间、业务和技术之间、统计指标之间统一认识与口径。在技术方面,数据标准能够帮助构建规范的物理数据模型,实现数据在跨系统间敏捷交互,减少数据清洗的工作量,便于数据融合分析。
数据标准是数据资产管理多个活动职能的核心要素,主要体现在数据质量管理、主数据管理、元数据管理、数据模型管理和数据安全管理几个方面。

  • 在数据质量管理方面,数据标准是数据质量稽核规则的主要参考依据,通过将数据质量稽核规则与数据标准关联,一方面可以实现字段级的数据质量校验,另一方面也可以直接构建较为通用的数据质量稽核规则体系,确保规则的全面性和可用性;
  • 在主数据管理方面,需明确的是主数据是数据在特定应用场景下的一种展现方式,主要活动是提取核心数据并明确核心数据的唯一来源,因此,对于涵盖企业全部数据的数据标准而言,其可以作为主数据管理的数据标准;
  • 在元数据管理方面,当将元数据管理的对象定义为结构化数据时,元数据管理主要指对结构化数据及其相关信息的管理,数据标准作为结构化数据相关信息的一部分,也是元数据管理的内容,具体包括数据标准与结构化数据的关系映射(即落标的过程)。当将元数据管理的对象定义为数据标准体系时,元数据管理主要指对数据标准分类、数据项及其属性、数据项属性规则等的管理;
  • 在数据模型管理方面,当数据标准的对象包含实体、属性和关系及其相关规则时,数据标准可作为数据模型管理的标准,用于数据库、数据仓库等系统的数据模型构建依据。就本白皮书所讨论的数据标准而言,数据标准体系可作为构建概念数据模型和逻辑数据模型的业务参考;
  • 在数据安全管理方面,数据标准可包含业务敏感数据对象和属性,从而实现对数据安全管理相关规则的定义。

《数据标准管理实践白皮书》

相关文章

  • 数据标准概述

    数据标准概述 数据标准是进行数据标准化的主要依据,构建一套完整的数据标准体系是开展数据标准管理工作的良好基础,有利...

  • MySQL 基础 1 MySQL简介

    1.1 数据库的概述 1.1.1 数据库的概述 什么是数据库数据库就是一个文件系统,通过标准的SQL语句获取数据 ...

  • Linux笔记7-Linux重定向和管道命令

    标准输入、标准输出、错误输出概述 1.标准输入(stdin)是指令数据的输入,代码为0,使用<或者<<,默认是键盘...

  • 1、变量及数据类型

    数据类型概述 1、Python标准数据类型:Numbers数字,String字符串,Bool布尔型,List列表,...

  • PHP全栈学习笔记28

    数据库Mysql概述,数据库操作,数据表操作,数据类型,管理数据库 sql标准语言:数据查询语言 select数据...

  • PHP全栈学习笔记28

    数据库Mysql概述,数据库操作,数据表操作,数据类型,管理数据库 sql标准语言:数据查询语言 select数据...

  • Java-Spark系列5-Spark SQL介绍

    一.Spark SQL的概述 1.1 Spark SQL 来源 Hive是目前大数据领域,事实上的数据仓库标准。 ...

  • Java JDBC中,MySQL字段类型转换jdbcType

    概述 MySQL里的数据字段类型与Java数据类型的对应标准。 1. 类型映射关系 MySQL类型类型、JDBC类...

  • DES加密算法原理及使用Java不导包的实现

    一. DES概述 数据加密标准(Data Encryption Standard),一种使用密钥加密的块算法,19...

  • 标准库概述

    像 fmt、os 等这样具有常用功能的内置包在 Go 语言中有 150 个以上,它们被称为标准库,大部分(一些底层...

网友评论

      本文标题:数据标准概述

      本文链接:https://www.haomeiwen.com/subject/xbzlohtx.html