spark Dataset<Row>如何按行获取数据？
需求：要把spark的数据转为json数据，collectAsLIst()返回LIst，但是如果数据量太大，内存肯定不够，所以有什么办法可以一行一行获取
看到limit（n）方法也只能获取前n的数据
spark
赞
收藏 0
回答 1
待解决
相关问题
mysql 如何获取表的按比例获取数据 （比如获取30%记录）
2204浏览 • 1回复 待解决
如何修改spark资源上传目录？
1042浏览 • 1回复 待解决
spark 分布式写数据到oracle
1002浏览 • 1回复 待解决
Row布局中，如何让子元素横向居中，并且垂直居中？
30浏览 • 1回复 待解决
怎样从海量数据中模糊查询到指定字段的数据行?
952浏览 • 1回复 待解决
spark 没有c#的api，那c#怎么用spark呢？
1349浏览 • 0回复 待解决
PolarDB 的行如何写入块？
1701浏览 • 1回复 待解决
PolarDB 的行如何从块中读？
1443浏览 • 1回复 待解决
spark submit 运行多个任务问题，求大神解答?
927浏览 • 0回复 待解决
docker 查询日志如何只显示最近 10 行?
1778浏览 • 1回复 待解决
鸿蒙jsUi如何制作按钮按下动效
7430浏览 • 3回复 待解决
Column组件中放了Row子组件，当Row中的内容过长时，会显示在Column以外的区域
733浏览 • 1回复 待解决
textOverflow怎么按字母截断
412浏览 • 1回复 待解决
如何连续获取相机预览流数据
187浏览 • 1回复 待解决
如何获取数据表中最新的数据最新时间？
4233浏览 • 1回复 待解决
如何获取截屏的事件和数据
903浏览 • 1回复 待解决
如何使用网络接口获取数据库MySQL中的数据
908浏览 • 1回复 待解决
只对比最后两行，求最后一行是否比上一行大，如果成立累加1，在DolphinDB中求累计总数
1519浏览 • 1回复 待解决
camera 获取预览数据
607浏览 • 1回复 待解决
spark 只分配2个executor，什么原因?
1098浏览 • 1回复 待解决
如何实现页面加载前从接口获取数据
1129浏览 • 1回复 待解决
业务模块HAR如何获取宿主HAP的数据
929浏览 • 1回复 待解决
设置Stack的backgroundImage时，图片无法按比例拉伸，只能按原始大小在左上角平铺
301浏览 • 1回复 待解决
实际问下各位公司中的spark集群有几台?
1332浏览 • 1回复 待解决
linux排除带空行和#开头的行
3862浏览 • 1回复 待解决
使用foreachParttition可以遍历