huashengshu 最近的时间轴更新 huashengshu 最近的时间轴更新 |
huashengshuV2EX 第 87099 号会员，加入于 2014-12-17 14:22:49 +08:00 |
huashengshu 最近回复了
2018 年 11 月 12 日 回复了 CharlieBrown 创建的主题 › Redis › 用 Redis 去重，数据量大概 90w/月，不断累积，服务器需要多少内存 |
@SummerWQM 讲道理，spark/hadoop 是需要巨大成本的，1000w 一年的量，一个列式数据库就搞定了
2018 年 11 月 12 日 回复了 CharlieBrown 创建的主题 › Redis › 用 Redis 去重，数据量大概 90w/月，不断累积，服务器需要多少内存 |
1000w 的短 key 也就 1-2G 吧，key 越多，内存膨胀越厉害，可以考虑分桶+hashmap
如果不需要精确值，可以考虑 HyperLogLog、bitmap，redis 也支持这两种数据结构
如果不需要精确值，可以考虑 HyperLogLog、bitmap，redis 也支持这两种数据结构
2018 年 11 月 9 日 回复了 kimjxie 创建的主题 › 酷工作 › 深圳阿里巴巴 Python 高级开发工程师/专家 |
后海这边的吧？ up↑
2018 年 11 月 8 日 回复了 miniyao 创建的主题 › Python › Whoosh 全文检索有分布式的解决方案吗？ |
都考虑分布式扩展，直接上 es 了，whoosh 索引文件大了以后效率感人
浮点精度损失
2018 年 10 月 12 日 回复了 656373197 创建的主题 › 酷工作 › 深圳 OPPO 电商团队招高级安卓开发(基本工资:20k-35k，年终奖一般都有惊喜，不强调加班，强调工作效率和结果，双休)，工作地:深圳福田 |
顶，OPPO 是家好公司 :-)
Select Language