美文网首页flink
flink架构师1-开发基础

flink架构师1-开发基础

作者: fat32jin | 来源:发表于2020-10-24 08:38 被阅读0次
  1. Flink 基础开发常用方式 0:00~1:18

  2. Flink 原理 TaskManager & slot & 并行度 & Task 关系 1:18 ~ 2:08

  3. Flink 数据传输策略 2:09~2:50

数据传输策略

  1. forward strategy

  2. 一个 task 的输出只发送给一个 task 作为输入

  3. 如果两个 task 都在一个 JVM 中的话,那么就可以避免网络开销

  4. key based strategy

  5. 数据需要按照某个属性(我们称为 key)进行分组(或者说分区)

  6. 相同 key 的数据需要传输给同一个 task,在一个 task 中进行处理

  7. Flink 分布式四层模型 2:51 ~

相关文章

网友评论

    本文标题:flink架构师1-开发基础

    本文链接:https://www.haomeiwen.com/subject/jyfsmktx.html