flink

flink架构师1-开发基础

2020-10-24  本文已影响0人  fat32jin
  1. Flink 基础开发常用方式 0:00~1:18

  2. Flink 原理 TaskManager & slot & 并行度 & Task 关系 1:18 ~ 2:08

  3. Flink 数据传输策略 2:09~2:50

数据传输策略

  1. forward strategy

  2. 一个 task 的输出只发送给一个 task 作为输入

  3. 如果两个 task 都在一个 JVM 中的话,那么就可以避免网络开销

  4. key based strategy

  5. 数据需要按照某个属性(我们称为 key)进行分组(或者说分区)

  6. 相同 key 的数据需要传输给同一个 task,在一个 task 中进行处理

  7. Flink 分布式四层模型 2:51 ~

上一篇 下一篇

猜你喜欢

热点阅读