大数据:如何模拟2000万辆车并发发送数据
应该如何实现2000万辆车并发发送数据,数据内容可以包括车辆的经纬度位置,目前的车况数据等等;数据发送频率设置为每辆车每十秒发送一条数据。请问应该如何实现?
考虑使用spark或者storm?
如何实现这么大量数据的产生。。。请教各路大神,感激不尽!!!
大数据
spark
赞
收藏 0
回答 1
待解决
相关问题
HarmonyOS 数据存储中关于大数据存储问题
152浏览 • 1回复 待解决
如何发送字节流数据 ?
513浏览 • 1回复 待解决
PersistentStorage能否存储大数据量,为什么?
334浏览 • 1回复 待解决
编解码播放大数据量流问题
3118浏览 • 0回复 待解决
json 转换大数字数据,HarmonyOS有什么推荐方案吗?
317浏览 • 1回复 待解决
并发问题和内存数据刷盘问题
4069浏览 • 1回复 待解决
发送字节流数据(application/octet-stream)
1106浏览 • 1回复 待解决
三维模型数据是否可以通过postgreSQL数据库存储并发布服务?
3281浏览 • 1回复 待解决
Socket连接中支持发送哪些数据类型
1605浏览 • 1回复 待解决
PHP高并发写入数据重复问题有知道的吗?
2296浏览 • 1回复 待解决
mysql我有一张350万数据的表,怎么优化sum()查询?
2293浏览 • 1回复 待解决
关于http请求数据发送异常问题的咨询
296浏览 • 1回复 待解决
Redis如何处理高并发下对一个数据的访问?
3397浏览 • 1回复 待解决
如何查看模拟器设备数据库文件
1294浏览 • 1回复 待解决
kafka生产者如何保证发送到kafka的数据不重复?
2234浏览 • 1回复 待解决
本地模拟器怎么导入媒体数据?
4403浏览 • 1回复 待解决
下面的数据库操作应该是有并发安全问题的吧?
2376浏览 • 1回复 待解决
在建立好TCPSocket之后,发送数据时,因数据类型不一定都是字符串类型
495浏览 • 1回复 待解决
后台列表查询与展示,大数据量并且分页的情况下,有什么好的解决方案?
3177浏览 • 1回复 待解决
使用模拟器通过preferences缓存了数据,但是重新运行安装app后,数据又没有了?
377浏览 • 1回复 待解决
数据持久化存储,HarmonyOS如何使用简单数据和复杂数据?
315浏览 • 1回复 待解决
HarmonyOS车机如何开发仪表类应用
3060浏览 • 1回复 待解决
ArkTS的对象数据与Native的对象数据如何绑定,相互持有对象数据时内存如何管理
1875浏览 • 1回复 待解决
关系型数据库如何在设备间同步数据、如何查询其它设备上的数据
1476浏览 • 1回复 待解决
200万/s这个发送频率在服务端进来的时候就尽量横向扩吧,这里主要是rpc框架的选择和数据的序列化反序列化速度,而考虑到带宽则需要选择序列化结果小的或者压缩比大的方式,比如thrift等。而你说的spark或者storm这些都是后置计算的,这个和数据如何生产没多大关系