为什么增加spark.yarn.executor.memoryOverhead？

作者: 哈哈哈哈
发布时间: 2024-12-11 07:33:50 (27天前)
转自：

2 条回复

0#
回复此人
一生浮华 | 2019-08-31 10-32

<div class =“post-text”itemprop =“text”> <P> 很好地解释了开销选项 <a href="https://spark.apache.org/docs/latest/configuration.html" rel="nofollow noreferrer"> 配置文件 </A> ： </p> <BLOCKQUOTE> <P> 这是一个内存，可以解决诸如VM开销，实习字符串，其他本机开销等问题。这往往会随着执行程序的大小而增加（通常为6-10％）。 </p> </BLOCKQUOTE> <P> 如果您使用其中一种非JVM客户语言（Python，R等），这还包括用户对象。 </p> </DIV>

编辑

登录后才能参与评论