如何修改spark资源上传目录？
yarn.Client: Uploading resource file:/tmp/spark-6947d690-9749-43bd-8d9a-e14e8ccc1138/__spark_libs__3170539481839891703.zip -> hdfs://node4:9000/user/root/.sparkStaging/application_1623053077163_0001/__spark_libs__3170539481839891703.zip
如上一段SPARK日志输出，请问如何修改上传的目录，也就是 将hdfs://node4:9000/user/root/...目录修改为其他目录
spark
赞
收藏 0
回答 1
待解决
相关问题
在OceanBase中，如何修改资源限制？
1300浏览 • 1回复 待解决
HAP中如何引用HAR包中resources目录的element目录、media目录和rawfile目录资源
180浏览 • 1回复 待解决
如何动态访问media目录下的资源
218浏览 • 1回复 待解决
spark Dataset<Row>如何按行获取数据？
662浏览 • 1回复 待解决
Spark集群修改ip后一直去连老的Master是怎么回事？
460浏览 • 1回复 待解决
如何通过资源ID拿到对应资源？
5469浏览 • 3回复 待解决
mysql 如何批量修改？
1060浏览 • 1回复 待解决
spark 没有c#的api，那c#怎么用spark呢？
766浏览 • 0回复 待解决
如何动态根据资源名获取资源id
6691浏览 • 1回复 已解决
spark submit 运行多个任务问题，求大神解答?
408浏览 • 0回复 待解决
如何使用onShowFileSelector()函数拉起图库上传图片
153浏览 • 1回复 待解决
如何修改OceanBase 集群参数？
2407浏览 • 1回复 待解决
自定义json资源文件需要放在工程的哪个目录下？用什么方式读取内容？
420浏览 • 2回复 待解决
如何引用非本地目录的HSP
197浏览 • 1回复 待解决
请问鸿蒙开发如何访问公共目录的文件或者其他应用目录下的文件
3117浏览 • 2回复 待解决
如何修改DevEco颜色主题？
7514浏览 • 3回复 已解决
如何获取当前应用程序缓存目录
223浏览 • 1回复 待解决
如何监听文件或文件目录的变化
127浏览 • 1回复 待解决
如何减轻icon资源锯齿感
218浏览 • 1回复 待解决
鸿蒙如何读取resources目录下的文件
1253浏览 • 1回复 待解决
如何使用Zip模块解压项目目录rawfile中的文件至应用的沙箱目录中
504浏览 • 2回复 待解决
spark 分布式写数据到oracle
459浏览 • 1回复 待解决
怎么实现后台上传图片？
606浏览 • 1回复 待解决
如何修改应用的icon图标
177浏览 • 1回复 待解决
如何通过代码随意修改锁屏图片?
3678浏览 • 1回复 待解决
在
spark-defaults.conf 里设置属性 spark.yarn.stagingDir