大数据:如何模拟2000万辆车并发发送数据

应该如何实现2000万辆车并发发送数据,数据内容可以包括车辆的经纬度位置,目前的车况数据等等;数据发送频率设置为每辆车每十秒发送一条数据。请问应该如何实现?

考虑使用spark或者storm?

如何实现这么大量数据的产生。。。请教各路大神,感激不尽!!!


大数据
spark
2023-08-28 13:08:35
浏览
收藏 0
回答 1
回答 1
按赞同
/
按时间
可乐鸡翅521

200万/s这个发送频率在服务端进来的时候就尽量横向扩吧,这里主要是rpc框架的选择和数据的序列化反序列化速度,而考虑到带宽则需要选择序列化结果小的或者压缩比大的方式,比如thrift等。而你说的spark或者storm这些都是后置计算的,这个和数据如何生产没多大关系


分享
微博
QQ
微信
回复
2023-08-28 14:52:12
相关问题
如何发送字节流数据
1333浏览 • 1回复 待解决
HarmonyOS 主线程处理大数据导致卡死
1216浏览 • 1回复 待解决
编解码播放大数据量流问题
4141浏览 • 0回复 待解决
并发问题和内存数据刷盘问题
5107浏览 • 1回复 待解决
HarmonyOS BLE蓝牙发送数据量大的问题
1236浏览 • 1回复 待解决
HarmonyOS 实现蓝牙连接打印机发送数据
1622浏览 • 1回复 待解决
后端发送数据怎么做的?http方式
400浏览 • 2回复 待解决
Socket连接中支持发送哪些数据类型
2405浏览 • 1回复 待解决
本地模拟器怎么导入媒体数据?
5514浏览 • 1回复 待解决
如何查看模拟器设备数据库文件
2448浏览 • 1回复 待解决
关于http请求数据发送异常问题的咨询
1165浏览 • 1回复 待解决