flink on yarn的应用模式，我提交一个程序最少都要占用4G内存吗?-[阿里云_云淘科技]

匿名 • 2023年12月18日上午8:06 • 阿里云

flink on yarn的应用模式，我提交一个程序最少都要占用4G内存吗?task manager占至少2G，job manager占2G。

以下为热心网友提供的参考意见

Flink on YARN的应用模式中，每个TaskManager的内存是由参数taskmanager.memory.process.size配置的。默认情况下，该参数的值是1GB。因此，如果你提交一个程序时没有显式地指定该参数的值，那么TaskManager将使用默认值1GB来启动。

但是，需要注意的是，TaskManager在运行过程中可能会动态调整其内存使用量。例如，当TaskManager需要缓存大量的数据时，它可能会尝试增加其内存使用量。此外，如果TaskManager同时运行多个任务，则每个任务都需要一定的内存空间。因此，在实际使用中，TaskManager的内存使用量可能会超过1GB。

总之，如果你提交一个程序时没有显式地指定TaskManager的内存大小，那么它将使用默认值1GB来启动。但是，由于各种原因，TaskManager的实际内存使用量可能会超过这个值。

本文来自投稿，不代表新手站长_郑州云淘科技有限公司立场，如若转载，请注明出处：https://www.cnzhanzhang.com/11487.html