spark 只分配2个executor,什么原因?
spark-submit master为yarn。命令如下:
spark-submit --master yarn --deploy-mode cluster --class com.fooww.research.houserank.recommend.data.RentData --jars /root/fangwu/mysql-connector-java-8.0.16.jar,jedis-2.7.0.jar,spark-redis-0.3.2.jar --conf spark.default.parallelism=10 --conf spa
rk.cores.max=10 --conf spark.executor.cores=1 --conf spark_executor_instances=5 --conf num-executor=5 fangwu-spark-1.0.0.jar
为什么执行之后,还是只分配了两个executor?
spark
executor
赞
收藏 0
回答 1
待解决
相关问题
ForEach无法遍历全部数据,是什么原因
2927浏览 • 1回复 待解决
编译DNX问题:source: not found什么原因啊?
2982浏览 • 1回复 待解决
系统提示Duplicate function implementation什么原因呢?
1647浏览 • 1回复 待解决
HarmonyOS AVPlayer创建失败,5400102是什么原因?
1642浏览 • 1回复 待解决
地图定位不准,是什么原因啊?
1048浏览 • 1回复 待解决
如下代码报错时什么原因
512浏览 • 0回复 待解决
px2vp返回值不准确,有谁知道是什么原因?
3692浏览 • 1回复 待解决
API 9 Stage模型 报错 not dictionary 什么原因啊?
2778浏览 • 1回复 待解决
设备卡死,无法重启,是什么原因啊?
1750浏览 • 1回复 待解决
mysql总是提示表单内缺少值什么原因啊?
2915浏览 • 1回复 待解决
mysql 隔几个小时就需要重启什么原因?
3650浏览 • 1回复 待解决
nginx反向代理时出错提示504什么原因?
3335浏览 • 1回复 待解决
DevEcoStudio软件的pnpm安装不了什么原因啊?
3752浏览 • 1回复 待解决
HarmonyOS DevEco Studio 打包构建很慢是什么原因
1345浏览 • 1回复 待解决
HarmonyOS app crash但是不知道什么原因
1185浏览 • 1回复 待解决
ohos.multimodalInput.inputMonitor无法引入什么原因啊?
3184浏览 • 1回复 待解决
HarmonyOS 报错 window load content failed是什么原因
2017浏览 • 1回复 待解决
Docker 容器异常退出,code 139 是什么原因?
7187浏览 • 1回复 待解决
nginx缓存导致页面失效什么原因啊?
3242浏览 • 1回复 待解决
下图是目录结构,错误一直出现什么原因?
3086浏览 • 1回复 待解决
启动UIAbility报The specified ability does not exist 错误是什么原因?
2462浏览 • 1回复 待解决
mac操作系统无法配置ohpm什么原因呢?
4206浏览 • 2回复 待解决
Deveco studio,API版本4.0.0(10),报错什么原因啊?
4179浏览 • 1回复 待解决
HarmonyOS 使用drawTextBlob画中文出不来,是什么原因?
1093浏览 • 1回复 待解决
--conf num-executor=5
改成 --num-executor 5