美文网首页
数据工厂DataWorks

数据工厂DataWorks

作者: etheon | 来源:发表于2020-02-02 17:46 被阅读0次

学习目标

1.理解DataWorks基本概念
2.了解DataWorks基本功能
3.掌握DataWorks数据开发基本流程
4.了解数据质量管理共功能和使用
5.了解数据保护伞功能和使用


DataWorks基础知识

数据集成、数据开发、数据管理、数据治理、数据分享

DataWorks功能

  • 数据开发工具
  • 数据同步工具
  • 数据地图

功能描述

  • 数据开发
  • 部署发布
  • 任务运维监控
  • 数据管理
  • 离线调度
  • 管理中心

基本概念

  • 计算引擎
  • 项目空间
  • 分区
  • 任务/实例
  • 资源
  • 解决方案、业务流程
  • 组件、输出名称

DataWorks使用流程

构建数仓常见流程

1.数据产生
2.数据收集与存储
3.数据分析与处理
4.数据提取
5.数据展现与分享

Dataworks中的流程

组织管理员->项目管理员->开发->部署+运维

新建项目空间

添加组织成员、项目成员

数据开发概述

数据开发总览

业务流程

业务流程中的节点

业务流成分类

数据开发流程

数据输入->数据加工->数据输出->代码发布->生产调度->生产运维

DataWorks最佳实践

创建项目空间篇

数据加工篇

调度参数使用

数据管控篇


DataWorks数据治理

DataWorks数据质量-概述

支持多种异构数据源的质量校验、通知、管理服务的一站式平台。

数据保护伞

提供数据资产识别、敏感数据发现、数据分级分类、脱敏、访问监控、风险发现预警与审计。

相关文章

网友评论

      本文标题:数据工厂DataWorks

      本文链接:https://www.haomeiwen.com/subject/btmqxhtx.html