V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX  ›  zgscwjm  ›  全部回复第 1 页 / 共 1 页
回复总数  20
@vivisidea 300w 要乘以 1000 个客户哦,就是 30 亿数据,全量同步的时候,cpu.io 全部打满.大约 40 分钟的时间内 通过 id 查询 耗时在 5 秒之上.3 个节点.ssd 上了哦,就是没有资源了.
@headwindx 会从中根据各种属性进行筛选
@SorcererXW 大促 100w 的商品变动,要乘以 1000 的客户数.
@me1onsoda 300w 乘以 1000 客户数
@31415926535x 多个分片,就是硬件资源有限,拆分索引会冗余存储商品信息.商品的基础变更会被放大.现在是直接用 spark 往 es bluk 写入,会把机器拖死,已经调整了 es 的 refresh_interval,等参数.商品价格,折扣对精度有要求.引入 kafka/mq 中间件这些的之前有考虑过,可以缓解 IO,但是更多的是想在结构上进行调整.
@lazyfighter 大促的时候,商品的基础价格,返点有变化,通过 spark 计算后,全量同步到 es 上,现在写入的过程中,会把 es 集群的 cpu.io 打满.导致其他服务查询 es 的时候超时
@wangbin11 缓存这些我理解在这里的场景使用有限吧.
@MADBOB toB
@Masonn 大佬,同 NAS 新手,24 小时开机,求一个 ,邮箱 :emdzY3dqbUBnbWFpbC5jb20= 感谢
166 天前
回复了 zgscwjm 创建的主题 NAS 想买一个成品 NAS,畅网和天钡怎么选
@ghijnuuz 额,可能描述的不是特别准确,懒得自己组装.别人配好了硬件.
166 天前
回复了 zgscwjm 创建的主题 NAS 想买一个成品 NAS,畅网和天钡怎么选
@godwei 求个型号我去了解下
166 天前
回复了 zgscwjm 创建的主题 NAS 想买一个成品 NAS,畅网和天钡怎么选
@walkbox 白裙感觉性价比不高呢.
314 天前
回复了 zeroxia 创建的主题 NAS NAS 配置请教
mark 一下,后面抄作业
make 有着同样的困惑.感觉靠制度来约束,很难.人都会犯错.
2023-10-07 13:51:18 +08:00
回复了 orangutan92 创建的主题 macOS 关于 macOS 上中文输入法回车跳转搜索的问题
关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   681 人在线   最高记录 6679   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 30ms · UTC 21:43 · PVG 05:43 · LAX 13:43 · JFK 16:43
Developed with CodeLauncher
♥ Do have faith in what you're doing.