spark submit 运行多个任务问题,求大神解答?

spark submit 运行多个任务问题,求大神解答?-鸿蒙开发者社区

 我用的是独立模式,2个application 提交的参数是: --master spark://spark-1:7077 --executor-memory 4g  --driver-memory 2g --total-executor-cores 12 --executor-cores 4  ,为什么后面一个application一直处于等待状态?


spark
2023-08-23 14:13:40
浏览
收藏 0
回答 1
待解决
回答 1
按赞同
/
按时间
自封的不算

应该是机器被进程占了所有的cpu造成其他进程排队,把进程解决掉了,后面重新启动第二个spark任务就直接running状态了。

分享
微博
QQ
微信
回复
2023-08-23 16:38:44
提问
该提问已有0人参与 ,帮助了0人