特牛生活网

【Flink】反压原理和 内存管理_ddr反压-CSDN博客

网友收藏
文章浏览阅读1.8k次。Spark Executor能跑多少个Task,由Core个数决定反压原理反压是指任务(Task)之间的现象;Task是线程,运行Task的是TaskManager进程,每个TaskManager中可以跑的Task数量是不确定的,1个Slot中可以跑1-n个Task;Flink网络传输下的内存管理:1.根据配置,Flink会在NetWorkBufferPool中生成一定数量(default 2048)个内存块MemorySegment,内存块的数量代表网络传输中所有可用的内存。NetWork._ddr反压
标签:ddr反压