2020-07-20

spark streaming 结构化流 批量处理为主

flink 流为主，批量处理只是流处理中的一个特例

storm 流处理 tuple

事件驱动
异常检测 规则告警

数据分析
产品更新分析 广告分析

数据管道
实时搜索

开发流程

1 设置上下文

2 设置数据源

3 数据转换处理

4 数据存储

image.png