V2EX › matrix1010 的所有回复 › 第 12 页 / 共 26 页

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

1 ... 8 9 10 11 12 13 14 15 16 17 ... 26

❮

❯

2023-12-25 17:41:33 +08:00

回复了 yodhcn 创建的主题 › 程序员 › elasticsearch/lucene 怎么优化多语言搜索？

专用分词器是指带词库的那种？短文本 title 很适合 ngram ，长文本由于各类干扰词很多而且为了缩减总 token 量才需要词库

2023-12-25 17:37:42 +08:00

回复了 matrix1010 创建的主题 › Go 编程语言 › Otter, 兼具高性能与高命中率的内存缓存

@NoOneNoBody 我也不是作者

2023-12-18 21:15:23 +08:00

回复了 6581 创建的主题 › Go 编程语言 › go json.Unmarshal 深拷贝性能太差怎么办？

结构固定直接走代码生成不就行了

2023-12-18 21:14:03 +08:00

回复了 hkhk366 创建的主题 › 程序员 › everything 索引原理探讨

@hkhk366 按照官方说明索引 100 万文件要花 1 分钟： https://www.voidtools.com/en-us/faq/#how_long_will_it_take_to_index_my_files. 考虑到要建索引和分词 1 秒 100 万不太可能。倒排索引我觉得 1gram 和 2gram 就行。文件名 1 个索引，文件大小 1 个索引。文件名索引存[]string ，其他索引直接存[]bytes 方便 bitwise 操作。比如搜"abcd", 那就 ("ab"索引 AND "bc"索引 AND "cd"索引) 。然后再 AND 文件大小索引。最后反查一遍文件名数组把 bitwise 结果为 1 的找出来。对于 regex 的情况如果包含常固定字符可以先用 ngram 过滤一遍，剩余结果再真用 regex 匹配

2023-12-18 15:47:52 +08:00

回复了 hkhk366 创建的主题 › 程序员 › everything 索引原理探讨

没明白 abc.txt 难分词的原因，搜索 a 那所有包含 a 的文件都应该显示。另外"倒排 100 万文件大约需要 1 个 GB 的空间"感觉也不对，你是用 sqlite 的全文检索测试的吗

2023-12-14 14:21:42 +08:00

回复了 owen800q 创建的主题 › 程序员 › 集思广益，上司提了个需求要短时间可以扛住 200 万 req/s

看上去 google cloud function 可以无限扩展 https://cloud.google.com/functions/docs/configuring/max-instances?hl=zh-cn

2023-12-06 21:58:27 +08:00

回复了 Nazz 创建的主题 › Go 编程语言 › memorycache v1.1.5 update: 写入速度达到 Ristretto 五倍

缓存策略相关的论文很多，包括各种改进版的 lru 策略也很多

2023-12-06 21:57:17 +08:00

回复了 Nazz 创建的主题 › Go 编程语言 › memorycache v1.1.5 update: 写入速度达到 Ristretto 五倍

@Nazz Hierarchical Timing Wheels, 我是照着 caffeine 的 java 代码翻译的，也可以 google 。LFU 就复杂些了, 建议去看 W-TinyLFU 的论文。简单来说 frequency 数据是存在 Count-Min Sketch 这种概率类数据结构里的，所以占用空间很小

2023-12-06 21:15:49 +08:00

回复了 Nazz 创建的主题 › Go 编程语言 › memorycache v1.1.5 update: 写入速度达到 Ristretto 五倍

@Nazz 知识盲区，也许这个能参考一下: https://github.com/golang/go/issues/54766

2023-12-04 20:24:08 +08:00

回复了 huabin 创建的主题 › 职场话题 › 为了从外包去自研（得物），值得从 955 到 996，且半年后还要重新找工作吗？ base 几乎不变，周六加班有工资。

我以前在的时候得物有工时排行榜的，而且还是公开的。你早下班会拉低整个组的平均工时

2023-11-29 18:51:07 +08:00

回复了 Nazz 创建的主题 › Go 编程语言 › memorycache v1.1.5 update: 写入速度达到 Ristretto 五倍

@Nazz 好家伙，这个展开出乎我意料。可能这是 V2EX 为数不多的外国朋友

2023-11-13 16:22:53 +08:00

回复了 Nazz 创建的主题 › Go 编程语言 › 怎么根据文本描述获得土拨鼠 LOGO 输出

这个看上去可能行 https://civitai.com/models/125264/golang-gopher

2023-11-09 20:37:03 +08:00

回复了 matrix1010 创建的主题 › 程序员 › Insomnia 强制登录

@neochen13 你是如何找到我这个 29 天前的主题的。看 issue Insomnia 8.3 应该已经恢复离线了

2023-11-08 21:02:38 +08:00

回复了 Nazz 创建的主题 › Go 编程语言 › memorycache v1.1.5 update: 写入速度达到 Ristretto 五倍

我测了测纯 GET 确实很快，因为用的是 xsync map( https://github.com/puzpuzpuz/xsync). 不过按照 xsync 作者的说法 GC 压力会更高( https://github.com/puzpuzpuz/xsync/issues/94)，这点从 benchmark 的 allocs 上倒是不太能看出来

2023-11-08 16:44:36 +08:00

回复了 Nazz 创建的主题 › Go 编程语言 › memorycache v1.1.5 update: 写入速度达到 Ristretto 五倍

无意中看到了另一个快 5 倍的 https://github.com/maypok86/otter (看 bench 写入比我的 Theine 也快 5 倍), 可以研究一下

2023-11-05 12:26:30 +08:00

回复了 Angela2022 创建的主题 › Amazon Web Services › **** AWS RDS MYSQL 查询好慢, 真是想说爱你不容易 ****

直连数据库执行 sql 也要 10s 吗？最好把 query plan 也发出来

2023-10-27 16:41:13 +08:00

回复了 Nazz 创建的主题 › Go 编程语言 › 分享一个轻量级的内存 KV 缓存库, 基于 hashmap 和 heap 实现

看到你的对比图我立刻想到了以前看到的鹅厂 tcache: https://zhuanlan.zhihu.com/p/624248354

2023-10-25 17:27:52 +08:00

回复了 LonnyWong 创建的主题 › Go 编程语言 › go 有办法调用基础库 golang.org/x/crypto 的私有结构和方法吗？

我觉得最优雅的办法就是 fork 。fork 完 release 个新版本，等 ssh 真的支持你想要的，再发布个新版本换回原来的