spark Dataset<Row>如何按行获取数据？
需求：要把spark的数据转为json数据，collectAsLIst()返回LIst，但是如果数据量太大，内存肯定不够，所以有什么办法可以一行一行获取
看到limit（n）方法也只能获取前n的数据
spark
赞
收藏 0
回答 1
相关问题
mysql 如何获取表的按比例获取数据 （比如获取30%记录）
3838浏览 • 1回复 待解决
HarmonyOS 资源管理对于rawfile中的文件如何按行读取？
1164浏览 • 1回复 待解决
如何修改spark资源上传目录？
2713浏览 • 1回复 待解决
spark 分布式写数据到oracle
2952浏览 • 1回复 待解决
HarmonyOS ArkTS中有什么接口可以按行读取文本文件的内容
1066浏览 • 1回复 待解决
spark 没有c#的api，那c#怎么用spark呢？
3174浏览 • 0回复 待解决
HarmonyOS Grid布局，按行排列，列数不固定，GridItem大小固定，如何让所有GridItem在中间，目前向左对齐了
1002浏览 • 1回复 待解决
怎样从海量数据中模糊查询到指定字段的数据行?
2828浏览 • 1回复 待解决
HarmonyOS 使用Text组件如何设置行与行之间的间距?
1490浏览 • 1回复 待解决
spark submit 运行多个任务问题，求大神解答?
2372浏览 • 0回复 待解决
HarmonyOS 如何使用Flex限制在2行，超过2行就折叠
811浏览 • 1回复 待解决
HarmonyOS 布局如何按比例分配
684浏览 • 1回复 待解决
row中放入textinput，textinput会超出row的范围
1220浏览 • 1回复 待解决
HarmonyOS row中的子控件超出了row的范围
1272浏览 • 1回复 待解决
HarmonyOS Row内部的Text长度超出了Row布局的范围
1791浏览 • 1回复 待解决
HarmonyOS Text组件会超出row的长度且row不被撑开
1063浏览 • 1回复 待解决
PolarDB 的行如何写入块？
3635浏览 • 1回复 待解决
HarmonyOS 字体行高应该如何设置
559浏览 • 1回复 待解决
如何对文本实现首行缩进？
858浏览 • 1回复 待解决
HarmonyOS 如何按比例设置控件高度
1201浏览 • 1回复 待解决
HarmonyOS 如何按比例设置控件高度？
586浏览 • 0回复 待解决
HarmonyOS row包裹的ab两个个子元素，如何让Row的高度自适应a的高度，让b的高度等于row的高度
571浏览 • 1回复 待解决
spark 只分配2个executor，什么原因?
2731浏览 • 1回复 待解决
HarmonyOS 如何实现Flex布局内容收起只显示1行，展开最多显示6行
934浏览 • 1回复 待解决
HarmonyOS text组件如何设置行上下间距
614浏览 • 1回复 待解决
使用foreachParttition可以遍历