美文网首页
RestCloud ETL数据集成平台,实时监控动态回放

RestCloud ETL数据集成平台,实时监控动态回放

作者: 谷云科技RestCloud | 来源:发表于2021-08-19 12:06 被阅读0次

RestCloud ETL数据集成平台通过可视化的拖、拉、拽即可完成数据集成流程的构建并实现数据抽取、转换、清洗、脱敏、加载等功能,RestCloud ETL数据集成平台从架构、易用性、传输性能、可视化、功能丰富性等方面均全面超越Kettle等开源ETL工具。是基于微服务架构完全自主研发和创新的新一代数据集成平台,产品的定位是为企业提供业务系统数据之间的集成以及异构数据源之间的数据传输于一体的一站式的数据处理平台,全Web化配置开箱即用,多种异构数据源之间通过平台快速进行数据交换,快速帮助企业构建数据集成平台,同时通过叠加API服务平台即可快速落地构建一个轻量级的数据中台。

RestCloud ETL数据集成平台

一、RestCloud ETL数据集成平台实时数据流支持

支持多种实时数据流的接入,支持Kafka实时数据流接入、支持MQTT物联网数据实时接入、支持HTTP实时数据流接入,实时数据流经过清选、转换、计算后可以实时存储到数据仓库中。

二、实时传输监控/动态回放传输过程

提供Web化的实时数据传输监控平台,可以清析的看到每个节点读取的数据量、插入的数据量、更新的数据量、删除的数据量、同时可以在日志中看到所有传输成功和传输失败的数据记录,传输失败的数据记录平台会自动记录失败原因和数据内容方便对数据质量进行控制。

RestCloud ETL数据集成平台支持执行流程的动态回放功能,对于复杂的数据集成流程可以清析的看到数据的传输路径及时定位错误。

RestCloud ETL数据集成平台

三、元数据管理支持

RestCloud ETL数据集成平台支持元数据管理以及元数据变更告警功能,通过元数据管理可以在线管理数据库的元数据并可以在线预览数据、当元数据发生变更时系统自动发送告警信息,支持元数据直接参与数据集成流程的读取和写入操作,通过元数据可以快速的查找引用的数据集成流程以及节点,对于梳理众多的复杂的数据集成流程提供了很好的解决方案,全面优于不提供元数据管理功能的数据交换工具。

相关文章

网友评论

      本文标题:RestCloud ETL数据集成平台,实时监控动态回放

      本文链接:https://www.haomeiwen.com/subject/lawobltx.html