平台工具+数仓构建数据产品（二）

作者: 一个数据人的自留地 | 来源:发表于2022-01-15 23:50 被阅读0次

@阿泱

一个热爱数据产品的工具人。

“数据人创作者联盟”成员。

01引言

滴滴橙心优选主要做社区电商，笔主主要负责电商中商城用户行为数据建设。用户行为数据具有巨大的商业潜力，他可以最大程度的还原用户在商城的购物场景，产品可以根据用户行为对产品体验进行优化，运营可以根据用户行为做精细化运营方案。电商环境中用户行为非常多，且分析视角多元，如何在电商复杂的业务场景中让业务利用好用户行为数据，是数据产品需要解决的问题。

02大数据生态组建

以下是笔主利用滴滴的平台工具（大数据生态组建）及数据仓库能力构建的数据产品，分享出来，与大家探讨一下

关于滴滴的平台工具（大数据生态组建）：

omega：一站式埋点数据解读

数据梦工厂：一站式全流程数据开发体验

数据地图：一站式元数据中心，数据资产图谱

指标字典：消除指标二义，定义最准确的指标

数易：敏捷、自助式数据分析和可视化平台

异动分析：自动化数据分析定位工具

关于滴滴的平台工具（大数据生态组建）在用户行为数据中的应用场景：

用户行为数据也可以说是埋点数据，由一系列的用户事件构成，例如用户注册、用户登陆、用户浏览商品、用户加购等。区别于其他订单类的业务数据，埋点数据没有固定的业务流，是片段的，需要根据业务场景对数据进行组装，进行结构化。

举例：如图所示，需要看首页banner有多少人看到了，有多少人点击了

业务流程：拆解需求->设计埋点->埋点上线->etl数据->展示数据

1、拆解需求

核心：拆解展示数据依赖的业务要素，确保埋点时必须有这些业务要素

有多少人看，有点少人点，其次是哪个位置。这里面有几个属性，人、看了什么、点击了什么、在什么位置，设计埋点的时候需要有用户信息，位置信息，曝光信息，点击信息

2、设计埋点（滴滴omega平台）

优先结构化埋点，分为四部分，业务线、业务线页面、页面模块（区域）、区域中的元素

确认事件类型，分为曝光事件、点击事件

确认事件属性，分为公共属性（大家通用）、私有属性（单独业务线具有）

对应1:模块是橙心优选APP（a）->首页(b)->banner区域(c)->banner图(d)

对应2:事件类型有两个，一个是曝光（sw），一个是点击(ck)

对应3:事件属性暂且定义公有属性，私有属性按照大家的分析场景可以自己补充，因为和人相关，所以必须携带userid,为了方便做用户画像，可以把用户携带的设备信息也带上，譬如imei,设备类型。私有属性也举个例子，这个部分d点位有可能是图，有可能放商品，分析的时候想区分都放了哪些图，所以需要一个参数去区分不同的图，定一个私有属性为资源id

3、埋点上线

设计需求的过程中对应的四点，一定要确定前端都传输了，并且告诉测试着四点是必须要侧的，保证以上数据就可以满足最基础的数据质量

注意：有些参数涉及到前后端的交互，沟通时需要注意，其他还OK

4、etl数据（数梦）

埋点数据在业务系统中，需要回收到数仓，数仓去开发脚本任务，也叫etl的过程

设计表结构