spark Dataset<Row>如何按行获取数据？
需求：要把spark的数据转为json数据，collectAsLIst()返回LIst，但是如果数据量太大，内存肯定不够，所以有什么办法可以一行一行获取
看到limit（n）方法也只能获取前n的数据
spark
赞
收藏 0
回答 1
待解决
相关问题
mysql 如何获取表的按比例获取数据 （比如获取30%记录）
1492浏览 • 1回复 待解决
如何修改spark资源上传目录？
446浏览 • 1回复 待解决
spark 分布式写数据到oracle
472浏览 • 1回复 待解决
怎样从海量数据中模糊查询到指定字段的数据行?
406浏览 • 1回复 待解决
PolarDB 的行如何从块中读？
808浏览 • 1回复 待解决
PolarDB 的行如何写入块？
1049浏览 • 1回复 待解决
docker 查询日志如何只显示最近 10 行?
1214浏览 • 1回复 待解决
鸿蒙jsUi如何制作按钮按下动效
6732浏览 • 3回复 待解决
spark submit 运行多个任务问题，求大神解答?
420浏览 • 0回复 待解决
spark 没有c#的api，那c#怎么用spark呢？
775浏览 • 0回复 待解决
如何获取数据表中最新的数据最新时间？
3621浏览 • 1回复 待解决
只对比最后两行，求最后一行是否比上一行大，如果成立累加1，在DolphinDB中求累计总数
856浏览 • 1回复 待解决
Column组件中放了Row子组件，当Row中的内容过长时，会显示在Column以外的区域
36浏览 • 1回复 待解决
如何获取截屏的事件和数据
60浏览 • 1回复 待解决
如何使用网络接口获取数据库MySQL中的数据
322浏览 • 1回复 待解决
业务模块HAR如何获取宿主HAP的数据
256浏览 • 1回复 待解决
如何实现页面加载前从接口获取数据
342浏览 • 1回复 待解决
linux排除带空行和#开头的行
3286浏览 • 1回复 待解决
SQL插入一个数据时，如何获取ID?
1193浏览 • 2回复 待解决
【ArkTS】分布式数据管理中如何获取deviceId
1542浏览 • 1回复 待解决
如何通过网络请求获取数据并通过List组件展示
213浏览 • 1回复 待解决
spark 只分配2个executor，什么原因?
516浏览 • 1回复 待解决
eTs中如何一次读取test.txt文件中的一行？
732浏览 • 1回复 待解决
ArkTS写法是否可以按TS/JS的逻辑理解
232浏览 • 1回复 待解决
如何将ability中want获取的数据同步到page
69浏览 • 1回复 待解决
使用foreachParttition可以遍历