V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
fanmouji
V2EX  ›  程序员

请问大家 GPS 数据是怎样的存储方案

  •  
  •   fanmouji · 2019-12-05 10:11:59 +08:00 · 3990 次点击
    这是一个创建于 1814 天前的主题,其中的信息可能已经有所发展或是发生改变。

    要做车载 GPS 数据采集,10 个左右的设备,每次使用时长 5 小时以内,考虑以下情况:

    1.快速(设备号、时间段、自定义用户字段等组合)查询轨迹,一般只是当天或一周内查询,但也可能会查询几年前的数据(万一真用好几年的话);

    2.转 json 方便;

    2.开发语言最好是 SpringBoot 相关,或者与平台无关;

    3.活跃开源的东西,踩坑容易找到解决办法。

    请问大家有什么建议吗?如:文件保存还是入库;入库用关系型还是非关系型等等。

    另有没有比较好的 GPS 开发设备推荐,网上搜的基本绑定他们自建后台,客服听你自己搞后台他们就基本不理你...

    14 条回复    2019-12-05 15:10:15 +08:00
    Kilerd
        1
    Kilerd  
       2019-12-05 10:45:25 +08:00
    postgreSQL 不是可以直接存 GEO 数据结构吗?
    wccc
        2
    wccc  
       2019-12-05 10:51:42 +08:00
    存数据用 InfluxDB 采集频率多快?
    fanmouji
        3
    fanmouji  
    OP
       2019-12-05 11:17:54 +08:00
    @Kilerd 谢谢,我去了解一下
    @wccc 频率不快,3-10 秒这样
    miniliuke
        4
    miniliuke  
       2019-12-05 11:29:54 +08:00
    时序数据库可以解决,上公有云的话,也有相关的产品
    wangxiaoaer
        5
    wangxiaoaer  
       2019-12-05 11:36:57 +08:00 via Android
    分表分库。
    Uyuhz
        6
    Uyuhz  
       2019-12-05 11:38:26 +08:00
    跟客服要份协议文档来就行。我们目前用的是 springboot+mongo
    alphatoad
        7
    alphatoad  
       2019-12-05 13:59:11 +08:00 via iPhone
    ES 好使
    zainJJ
        8
    zainJJ  
       2019-12-05 14:12:26 +08:00
    阿里云的表格存储 好使
    Destiny97
        9
    Destiny97  
       2019-12-05 14:14:04 +08:00 via Android
    安信可有开发板,稍微改一改就能用
    catcn
        10
    catcn  
       2019-12-05 14:18:06 +08:00
    数据量比较少,直接扔 PostgreSQL 就好
    opengps
        11
    opengps  
       2019-12-05 14:22:03 +08:00
    真好玩,我做这个做了好多年,不过最终结论是怎么存都行,无非是各有优缺点

    最开始我用的 sql server,只因为这个会用,最终优化结论单块物理机械硬盘峰值每秒写入 3000 峰值没问题。
    但是最建议的是还是后来调整的方案:使用非关系型数据库去存。首先会省不少空间,其次 nosql 普遍都有内存缓存优化,写入能力普遍较高,每秒写入峰值轻松破 10 万
    opengps
        12
    opengps  
       2019-12-05 14:24:21 +08:00
    你才需要 10 多台 gps,这个量我建议你直接用最偷懒的关系型数据库就够了
    表结构参考: https://www.opengps.cn/Blog/View.aspx?id=284
    securityCoding
        13
    securityCoding  
       2019-12-05 14:30:51 +08:00
    @opengps 能实时抗住流量就行,前面挂个 mq 随便怎么搞
    opengps
        14
    opengps  
       2019-12-05 15:10:15 +08:00
    @securityCoding 相信我,流量很小的,gps 普遍都是小数据包高频率,200 字节的 10 秒发一次,你 10 台设备同一秒,并发才 10,而且这不是 api 接口,而是 socket 通信,没有太大的头信息占用流量。
    socket 入门需要注意下粘包问题
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   2675 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 24ms · UTC 12:15 · PVG 20:15 · LAX 04:15 · JFK 07:15
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.