首页
编程
java
php
前端
首页
编程
java
php
前端
spark executor cpu超出限制
hive on spark 单个executor占用cpu超过上限
如图 该execouter实际占用cpu快占到了100多个 但提交的参数限制了executor core为4
spark.executor.cores
=
4
请问是参数配置问题吗 spark版本为 2.4.0-cdh6.3.2
这个CPU跟你看的机器的CPU不是一回事 , spark.executor.cores = 4 这个是对集群来设置的,跟你客户端没关系
点击展开全文