最近开始重拾大数据的工作，接手实时计算。计划按照官网的手册Flink_on_Windows
在Windows环境部署Flink 1.10版本，发现TaskManager启动失败，看日志主要是几个内存参数没有配置导致的，简单记录一下。
直接通过start-cluster.bat启动会拉起JobManager和TaskManager，如果下列参数不配置的话，TaskManager进程会退出，日志显示相关的参数没有配置，在conf/flink-conf.yaml中添加下面的配置，重新启动即可：
taskmanager.cpu.cores: 2
taskmanager.memory.task.heap.size: 512m
taskmanager.memory.managed.size: 512m
taskmanager.memory.network.min: 64m
taskmanager.memory.network.max: 64m
参数可以根据自己的需要设置。
关于Flink 内存模型，这位同学做了很好的分享：Flink 内存模型详解
最近开始重拾大数据的工作，接手实时计算。计划按照官网的手册Flink_on_Windows在Windows环境部署...
Flink源代码编译部署 以[release-1.10]版本为例 以 [Flink官方文档] 为参考 构建准备： ...
前言 为了解决Flink作业使用RocksDB状态后端时的内存超用问题，Flink早在1.10版本就实现了Rock...
分析flink-on-yarn per-job flink集群整体调用链 flink-1.10 ./flink r...
编译flink-shaded-hadoop-2-uber.jar包 从Flink 1.10开始，flink-sha...
课程大纲 第一章：Flink核心概念与实验环境部署 Flink概述 1、阐述Flink的前世今生 2、Flink生...
课程大纲 第一章：Flink核心概念与实验环境部署 Flink概述 1、阐述Flink的前世今生 2、Flink生...
课程大纲 第一章：Flink核心概念与实验环境部署 Flink概述 1、阐述Flink的前世今生 2、Flink生...
前言 本文介绍的内存配置方法只适用于Flink 1.10及以上版本。 相关配置详细说明: Flink Confi...
作者｜Alan 导读：滴滴实时计算引擎从 Flink-1.4 无缝升级到 Flink-1.10 版本，做到了完全对...
本文标题：【Flink】Windows环境部署Flink 1.10版本问题
本文链接：https://www.haomeiwen.com/subject/gyqichtx.html
网友评论