如何设置最小的num-executors,公式如何得出,使这个程序正好能运行?

spark版本:2.1.0

executor-memory:6g

executor-cores:2

dirver-memory:4g

堆外内存:1g

其余都是默认参数

如何根据图sparkui的input或shuffle read或写出公式计算出num-executors最小值

 

私聊

你好,我是有问必答小助手,非常抱歉,本次您提出的有问必答问题,技术专家团超时未为您做出解答

本次提问扣除的有问必答次数,已经为您补发到账户,我们后续会持续优化,扩大我们的服务范围,为您带来更好地服务。

 点赞

https://blog.csdn.net/abc33880238/article/details/102100579?utm_medium=distribute.pc_relevant_t0.none-task-blog-2~default~BlogCommendFromMachineLearnPai2~default-1.baidujs&depth_1-utm_source=distribute.pc_relevant_t0.none-task-blog-2~default~BlogCommendFromMachineLearnPai2~default-1.baidujs