lucyatwex 最近的时间轴更新 lucyatwex 最近的时间轴更新 |
lucyatwexV2EX 第 339849 号会员，加入于 2018-08-09 14:29:27 +08:00 |
| 数据库表保证读快还是保证写快， 1000tps 写入， 60000tps 查询？ 程序员 • lucyatwex • 2018 年 8 月 22 日 • 最后回复来自 kingcc | 7 |
lucyatwex 最近回复了
2018 年 8 月 21 日 回复了 lucyatwex 创建的主题 › 程序员 › 数据库表保证读快还是保证写快， 1000tps 写入， 60000tps 查询？ |
@CRVV 非常非常感谢您！
“我个人倾向于先设计一套尽量满足范式的表，然后如果确定某种修改方式能带来好处，再一点点改”，超级棒的建议，醍醐灌顶！
“写操作上不能加缓存”，可能我表达的不太正确，因为使用的是关系型内存数据库，针对当前营销活动建的表，所以我把它叫缓存表>_< 也算是直接读库和写库吧！
“我个人倾向于先设计一套尽量满足范式的表，然后如果确定某种修改方式能带来好处，再一点点改”，超级棒的建议，醍醐灌顶！
“写操作上不能加缓存”，可能我表达的不太正确，因为使用的是关系型内存数据库，针对当前营销活动建的表，所以我把它叫缓存表>_< 也算是直接读库和写库吧！
2018 年 8 月 21 日 回复了 lucyatwex 创建的主题 › 程序员 › 数据库表保证读快还是保证写快， 1000tps 写入， 60000tps 查询？ |
@ppyybb 非常谢谢您的分析，对我超级有帮助！
数据库是集群，做过单机的读写性能测试，并且集群上有做过项目（因为业务逻辑比较复杂，写 tps<1000，读 tps 未定量地观察过），所以我觉得老大应该是评测+经验吧
数据库是集群，做过单机的读写性能测试，并且集群上有做过项目（因为业务逻辑比较复杂，写 tps<1000，读 tps 未定量地观察过），所以我觉得老大应该是评测+经验吧
2018 年 8 月 21 日 回复了 lucyatwex 创建的主题 › 程序员 › 数据库表保证读快还是保证写快， 1000tps 写入， 60000tps 查询？ |
@kingcc 谢谢您回复！！！
应用场景是抽奖活动，用当事人的所有事件信息判断抽奖次数和奖品
当事人的量约为 500w，事件的量约为 2000w，一次事件包括用户的申请、交易、交易成功等全流程信息，一个当事人会有多次事件
缓存表保存所有历史事件和当事人身份信息，同时活动期间的注册、实名、申请、交易事件通过 storm 实时写入缓存表
我做的是提供当事人信息查询接口，当事人 id 过来，返回缓存表中该 id 的所有事件信息
应用场景是抽奖活动，用当事人的所有事件信息判断抽奖次数和奖品
当事人的量约为 500w，事件的量约为 2000w，一次事件包括用户的申请、交易、交易成功等全流程信息，一个当事人会有多次事件
缓存表保存所有历史事件和当事人身份信息，同时活动期间的注册、实名、申请、交易事件通过 storm 实时写入缓存表
我做的是提供当事人信息查询接口，当事人 id 过来，返回缓存表中该 id 的所有事件信息
2018 年 8 月 21 日 回复了 gouchaoer 创建的主题 › Java › hive 里面的字段全部用 string 是否有坑？ |
@gouchaoer 哦哦，get tidb ！！！谢谢！！！因为是在 hadoop 生态建数仓，所以用了 hive
2018 年 8 月 9 日 回复了 gouchaoer 创建的主题 › Java › hive 里面的字段全部用 string 是否有坑？ |
也取决不定是全用 string 还是映射类型，楼主后来有遇到坑吗？
Select Language