Flink应用打包部署内存不足问题及解决方法

本文针对Flink应用打包后在集群中运行时出现内存不足的问题，提供详细的分析和解决方案。

环境信息:

• JDK 8
• Flink 1.13.3
• Flink CDC 2.1.1 (集成JAR包)

在IntelliJ IDEA中运行正常，但打包成JAR并部署到Flink集群后，出现如下错误：

Could not acquire the minimum required resources

问题根源:

该错误表明集群资源（JobManager和TaskManager内存）不足以满足应用运行需求。

解决方案:

需要调整集群的JobManager和TaskManager内存配置，以满足应用的资源要求。建议根据应用实际情况调整以下参数：

• jobmanager.memory.process.size: 2600m
• taskmanager.memory.process.size: 2728m
• taskmanager.memory.flink.size: 2280m

重要提示: 以上内存配置值仅供参考，实际应用中需要根据应用的复杂度、数据量和并行度等因素进行调整，以找到最佳的资源配置。 建议先从小规模测试开始，逐步增加内存，直到找到一个稳定的配置。 过小的内存配置会导致应用运行缓慢或失败，而过大的内存配置则会造成资源浪费。