美文网首页
产品设计案例:数据采集分析系统

产品设计案例:数据采集分析系统

作者: 陪学 | 来源:发表于2024-12-18 10:56 被阅读0次

集团是国资企业,参考国资监管信息系统(三期)建设项目规范要求文档(包括信息资源规范、数据交换规范等),计划进行集团的数字化转型道路。

经营痛点

公司信息化建设己经取得了初步发展,在关键业务环节采用了信息化手段进行管控,建立了包括:人力资源系统、OA、财务系统等。

这些系统运行多年,积累了大量、不同类型的业务数据。但各系统间未实现打通,导致现在:

1.人力资源系统维护的企业基本信息不是战略需要的口径,因此数据不全;

2.财务系统、人力资源系统由不同部门独立维护,彼此相互独立,形成数据孤岛;

3.还有不少数据分散在各下属单位的excel文档中,上报到集团时,数据质量差、标准不一致,数据缺乏权威性;

4.集团没有统一的数据汇总分析平台,数据壁垒导致集团线下沟通成本高。

各业务系统之间数据集成和交互水平较低,系统无法有效协同并提供数据决策支撑。一旦系统间需要进行数据集成、交互,必须耗费大量人力、物力、财力资源以支撑业务流程和决策分析。

数据采集分析系统设计

针对集团痛点,项目团队确定了系统规划路径,达到实现数据统一管理的目标:

l  建立一套自上而下运转起来的数据管理体系,可以适合于各业务板块,以满足集团数据分析精细度的需求;

l  建立数据管理的基础能力,设置合适的标准化组织机构(集团及下属单位)、流程机制(填报审批职能)与平台数据管理(集团战略部)的工作,实现数据全流程管理;

l  开发数据分析平台,包含数据采集、补录、处理、分析等功能,实现与业务系统(人资系统、财务系统)数据集成。

一、组建项目团队

项目构建的指导思想是:明确分层,无论是数据采集分析、治理还是管理类别,必须保证项目顺利推进。

按照集团信息化项目管理要求,集团项目组分为高层领导小组、项目领导小组、项目建设小组。

二、需求调研

项目团队从管理与技术两大维度出发,开展了调研工作。

管理:细审组织架构、制度规范与业务流程,确保权限分配合理、设计贴合需求;

技术:优化数据存储,集成第三方系统,确保数据流通顺畅。同时精准设计数据维度与指标体系,满足多元分析需求,产出关键业务报告,助力集团决策力提升。

经过深入调研,项目规划了9个专题,涉及49张报表的详细调研,并据此编制了详尽的需求规格说明书。

三、方案设计

调研成果基础上,团队确定产品分为“数据填报”和“数据分析”两个方向进行规划设计。

数据填报:开发一个填报平台,以系统录入的方式将核心数据整合到数据库,实现数据的集中存储与管理。

平台设计时,充分考虑实际工作流程中的填报、审批、汇总、补录及催报等需求,确保平台功能的全面性与实用性。

数据采集完成后,进一步考虑与第三方系统的对接与调度问题。整合多方系统资源,实现数据的集中存放与共享,为后续的数据分析工作奠定坚实基础。

数据分析:根据业务需求,制作各类分析报表与考核报表,包括但不限于业务部门常用的分析表、投资相关报表以及定期报告。

同时构建驾驶舱决策分析工具,为领导层提供直观、全面KPI指标展示支持决策。

1、流程梳理与设计

  1. 投资计划梳理

以集团核心流程:业务投资计划为例,绘制业务流程图,明确角色分工及各阶段任务。

集团投资计划以年初、年中和年末为节点,年初制定投资项目并录入系统审批,年中及年末根据实际调整计划并上报。

领导层通过系统分析表,监控投资计划执行与调整情况,指导后续工作。

2、业务指标梳理

归纳集团5大核心业务指标:

  1. 基础项目库管理、

  2. 投资计划管理、

  3. 辅助性管理(如组织架构、绩效考核)、

  4. 项目库细化分类及特定信息关注

  5. 投资与生产经营计划的业务部门关注指标。

确定重点项目——能源类项目投资执行情况与经济效益监控、集团层面的管理优化与竞争力提升监测。

3、功能设计

项目为了减少底层数据梳理投入过多时间与精力。在不同业务端进行了针对性设计:

l  填报端:简化填报流程,降本增效

统一平台先简化填报流程,再明确规范、状态,达到降低沟通成本,提升效率的目的。通过邮箱与短信提前通知的催报机制,加快数据上报速度,减少遗漏,同时追踪流程,减轻填报与催办负担。

  1. 在线填报方便规范。通过浏览器访问系统,连接集团VPN后,即可随时随地打开任务进行填报,提高了工作效率

  2. 系统自动催报,通过邮箱或短信的方式提醒填报人及时上报数据

  3. 数据上报后,在工作流即可看到流程进度,能快速定位流程节点找到催办的办理人推进流程,例如月报,可根据设定的填报截止日期,从下往上地推动流程进展。

l  审核端:数据质量控制,权责明确

确定线上审核机制和流程,改变管理层工作方式,改用线上审核方式,有效管控下属单位数据问题。

将正常与非正常退回分类,纳入下属单位考核体系,用流程提升数据质量。

  1. 审核下属单位数据时,发现问题数据,可选择正常退回或非正常退回,后续每月统计下属单位的非正常退回次数,规范下属单位填写,减轻战略部工作量;

  2. 系统中,所有用户审核的流程均公开留痕,权责明确;

  3. 数据上报后,系统自动对填报表进行锁定,若更改数据,需提交解锁申请,方便审批人员对数据填报更新的管理

l  分析端:数据集中管理,实现自助分析

数据统一存储在集团数据库,可以随时查询。

系统提供自助式分析功能,用户可以拖拽基础数据,设计多维度报表,满足个性化分析需求。

  1. 集团数据库管理,数据即时入库存储,管理、查询实现连续性:

  2. 系统中,所有用户填报的数据全部以数据库表的形式保存,格式统一、数据完整,提高了数据的可应用性;

  3. 收集完填报的数据后,集团领导可自主查看所关注得分析表;另外制表人也可根据领导需要,拖拉拽维度和指标生成自助式分析报表,快速进行领导汇报,

  4. 领导可通过浏览器网页端,直接在线观看数据实时分析结果。

四、平台系统架构

“投资经营数据管理一体化平台”,覆盖数据采集、分析到应用完整过程。平台整合多源数据,自动提取、校验并引入审批流程,确保高效准确。同步第三方系统数据,构建核心业务数据中心,经治理库处理后供多场景使用。

数据管理平台采用分层设计,包括数据层、应用支撑层和应用层,三大核心板块紧密协作,共同支撑整个系统的运行。

整体上,以数据仓库搭建为基础,以数据收集与分析为主要手段,通过统一的访问门户,为不同角色和应用人员提供定制化、权限化的内容展示。

l  对接财务系统,自动取数

用数据调度工具直观展示抽取情况与任务信息,灵活设置数据推送、同步更新频率,满足业务需求,提升数据处理效率与用户体验。

l  数据级次权限控制,保障数据安全

集团数据具有敏感性和跨部门管理的严格性,数据权限设计不但要考虑了不同层级人员的职责需求,还要保证数据安全性和管理有效性。

因此,数据权限控制机制要确保:

1)下属单位仅能填报自身数据

2)限定单位领导仅能在其内部进行审批操作

3)战略部能查看、审批所有部门数据。

4)集团领导层能查阅汇总后的全面数据,包括详细明细数据,整体运营状况数据

l  规范数据填报,提升数据质量

用规范提升数据质量,要求:

1)标准字段采用下拉点选或自动取数,禁止手动填写;

2)设置审核公式校验多表逻辑关系;

3)结合技术手段与业务审核,形成三级校验机制,确保数据准确、完整后入库。

4)设计多样化表单界面,聚焦核心信息录入,提升效率。

l  短信催报,提醒下属单位按时上报

用催报机制提升数据提交效率。

前期调研发现部分单位,尤其是下属单位,因业务繁忙常遗漏填报信息。因此,平台允许设置催报对象、内容及时间,自动提醒接收人按时完成报表填写。

l  在线审批,权责留痕

在线审批流程,能够根据数据质量情况自动选择是否进行多级审批。

审批过程每一步都记录执行时间、办理人员及审批意见,确保数据留痕。

l  报表分析,自主筛选维度,分析指标

定制24张针对不同部门、集团领导的专项报表,精准聚焦关注点。

系统还支持定期生成数据报告,如:投资完成情况分析(格式固定但数据随统计周期动态变化)。

利用工具内置的分析报告功能,预先设计报告模板,通过设置可变参数,需要时简单切换时间周期,就可以快速生成最新报告。

相关文章

  • 携程的数据采集系统架构

    实时数据采集系统 原文链接 1. 典型的数据采集分析系统 数据采集数据传输数据清洗/建模/存储数据统计/分析/挖掘...

  • 数据埋点

    数据埋点学习 参考资料: 《三节课互联网数据分析实战》模块五 数据采集 神策 《数据运营:系统方法与实践案例》 第...

  • 网站数据挖掘--基础部分(未完)

    标签(空格分隔): 数据挖掘 数据分析 数据采集 网站数据采集、功能配置、系统实施和基本运营都是网站数据分析师的工...

  • 案例解析:海底捞、银行、商务酒店、香水单品市场、运营和销售数据挖

    最近这段时间花了不少时间整理了关于数据采集、数据分析、数据挖掘的案例,这些案例包括了海底捞、银行信用分析、商务酒店...

  • 200个数据分析方法、模型和案例

    最近有很多朋友找我要数据分析的案例,希望获得包括需求分析、数据清洗、数据采集、基本的描述性分析和探索性分析、数据可...

  • 电商评价分析,裸数据是基石

    电商评论分析除了人工对数据进行分析撰写分析报告,还有就是电商评价采集分析系统通过采集大量评论数据并提炼出其中蕴涵的...

  • 方案

    硬件建议 配置 操作系统 用途 系统性能 流程 数据来源 数据采集(汇报)方式 溯源查询 数据分析

  • 大数据采集、清洗、处理PV,UV实例

    大数据采集、清洗、处理:使用MapReduce进行离线数据分析完整案例 - 柯南爱上指针的博客 - CSDN博客 ...

  • 产品要懂点数据分析(三)- 分析过程

    数据采集 数据分析的对象就是数据,通过数据采集来获得数据。数据采集在《产品要懂点数据分析(一)-数据采集和数据指标...

  • 互联网名词解释

    BI系统:数据仓库系统 GrowingIO 是基于用户行为的新一代数据分析产品,提供全球领先的数据采集和分析技术。...

网友评论

      本文标题:产品设计案例:数据采集分析系统

      本文链接:https://www.haomeiwen.com/subject/cyvrejtx.html