美文网首页
数据治理与数据清洗

数据治理与数据清洗

作者: 命_79f6 | 来源:发表于2018-07-20 18:38 被阅读0次

大数据建设中会出现数据混乱、数据重复、数据缺失等问题,就需要对非标数据进行处理,涉及到数据治理与数据清洗,常常把数据治理和数据清洗搞混,可从以下方面进行区分:

一、概念不同

数据治理主要是宏观上对数据管理,由国家或行业制定制度,更具有稳定性。数据清洗是数据在指定数据规则对混乱数据进行清洗,规则由自己设定,

数据清洗主要是微观上对数据的清洗、标准化的过程

二、处理方式

数据治理由各种行业制度,

三、角色方面

数据治理属于顶层设定、具有权威性,数据清洗由需要部门提出的,随意性比较强。

相关文章

  • 数据治理与数据清洗

    大数据建设中会出现数据混乱、数据重复、数据等问题,就需要对非标数据进行处理,数据治理和数据清洗搞混,可从以下方面进...

  • 数据治理与数据清洗

    大数据建设中会出现数据混乱、数据重复、数据缺失等问题,就需要对非标数据进行处理,涉及到数据治理与数据清洗,常常把数...

  • 数据时代技能书单

    大数据时代,掌握处理数据的技能是必要的,书单包括数据清洗+数据挖掘+数据分析...... 1、数据清洗入门与实践 ...

  • 数据治理:将数据从源头进行清洗

    数据引发的混乱 数据一切都与技术的集中化有关。数据安全地存储在企业大型机上,只有具备导航预处理数据库技能的程序员才...

  • 数据治理中的有趣发现(一)

    数据治理,一般来说,涉及数据获取的治理、数据流程治理、数仓模型治理、数据权限治理、指标体系治理、数据应用能力提升、...

  • 数据清洗与数据集成

    前提概要 在数据爆炸的时代,我们每时每刻都在产生数据;怎样在海量数据中提炼出有价值的东西,这就需要我们有一双火眼金...

  • 面对数据治理的挑战及难点,如何找到最佳解决办法?

    一、建立数据治理计划时,您将遇到几个挑战: ·数据治理是更大的IT治理策略的一部分。数据与IT部门需要相互配合才能...

  • 第三章-数据预处理

    数据预处理的主要内容包括数据清洗、数据集成、数据变换和数据规约。 3.1数据清洗 数据清洗主要是删除原始数据集中的...

  • 数据清洗 - 概念与清洗数据类型

    数据清洗 数据清洗从名字上也看的出就是把“脏”的“洗掉”,指发现并纠正数据文件中可识别的错误的最后一道程序,包括检...

  • 数据治理篇-元数据: datahub概述

    前言. 元数据是数据治理的灵魂 1. 元数据之于数据治理 数据治理是一个庞大的系统,其中主要包括数据管控,数据质量...

网友评论

      本文标题:数据治理与数据清洗

      本文链接:https://www.haomeiwen.com/subject/sqwqmftx.html