安全问题不用考虑了? 如果模型直接输出了意料外的内容. 产品下架都是小事, 还有更严重的.

我们用 postgresql + citus + pgvector 可以扩展到几亿, 十亿级别都没什么问题.

就是模型能力问题. 我最近也是大量这种长文本的生成. 豆包 1.6 错误率非常高. qwen, ds3.1, gemini 要好一些. 但是要多样化, 几个模型都要使用. json_schema 也依赖模型能力, 使用了 json_schema,返回非 json 也是很常见的. 后面直接改成返回非 json 了(适用于返回的字段比较少的情况)

性能测试工具本身的性能也必须好. 单接口测试, 我一般推荐 wrk. 支持 lua 进行测试用例的编写.

用 MinIO 自建存储.

@gaodq 不是时序数据. 帖子,评论类的数据. 应用场景不是在线使用. 是中台离线检索数据用.
@shellus 满足需求就行. 几十亿当然不多, 但是扩展到百亿级别完全是没问题的. 这个看着不像是个人说的. AI 生成的吧. 先学会像人一样说话吧.

@newshbb
@FightPig 具体不记得了, 选择阿里云速度最快的云盘就行.
速度虽然不块, 但是整体写入要比业务数据写入量还是要大几个数量级的. 完全够用.

citus 用着挺好的. 我使用的场景数据量不大, 大概是几十亿级别. 不到 10 个 T 的数据. 5 台 ECS, 1 个协调节点 + 8 个 worker 节点.
citus 分片 + 按时间分区.
MS 大品牌值得信赖.

超时时就有可能通过 reset 断开链接的.
可以输入报错请求的整体请求时间, 看看是不是就是 10 秒左右.
通常是要优化服务了.

非常好用, 感谢分享. 有个 BUG: 失效的超过一屏, 后面没显示出来.

https://github.com/iGeeky/wolf/blob/master/agent/lua/body_filter.lua
@kaf 参考这个代码吧, 也是鉴权后, 在页面添加鉴权信息的.

用户的密码存储密文是不符合国家信息安全相关的法律规定的. (什么法不记得了, 但是国家肯定有要求). 你们还是做信息安全的, 支持开除.

使用 iTerm2 吧. 配置好不同的服务器地址后. 在多个 Tab 中打开. 然后使用广播输入的功能:
Shell -> Broadcast Input -> Broadcast Input to All Panes in All Tabs

打开该功能后, 你输入的每个命令都是在所有已连接的服务器上执行.
你可以批量执行 grep 命令搜索日志. 也能批量 tail -f 查看日志.

再推荐一个我一直在用的一个正则在线测试编写工具吧: https://regex101.com
测试效果图:
https://postimg.cc/XB0GyvM8

# 下面的正则是把用户输入的(无意义)大于 2 个字的重复的内容变成单个. 没想到有什么好的,简单的算法实现. 使用正则就比较简单.(python 代码)
userInputText = """
测试测试测试
哈哈哈哈哈哈哈哈哈哈哈哈
哈哈哈
你在干嘛呢?你在干嘛呢?你在干嘛呢?你在干嘛呢?你在干嘛呢?你在干嘛呢?你在干嘛呢?你在干嘛呢?你在干嘛呢?
"""
import re
regex = r"(?P<r>.{2,100}?)(?P=r){2,}"
subst = "\\1"
outputText = re.sub(regex, subst, userInputText, 0, re.MULTILINE)
print("## input")
print(userInputText)
print("## output:")
print(outputText)

# 输出:

## input

测试测试测试
哈哈哈哈哈哈哈哈哈哈哈哈
哈哈哈
你在干嘛呢?你在干嘛呢?你在干嘛呢?你在干嘛呢?你在干嘛呢?你在干嘛呢?你在干嘛呢?你在干嘛呢?你在干嘛呢?

## output:

测试
哈哈
哈哈哈
你在干嘛呢?

配置个强一点的笔记本或台式机. 本地运行大模型. 虽然比不上在线的服务, 总比没有强. 如果能把 70B 参数的跑起来,应该效果还行.

可以试试联合索引(query, type) 并且使用 hash 索引.
hash 索引不支持范围查询, 但是索引体积更小, 并且查询效率也更高.

不想折腾,可以看看阿里云的共享存储方案.
自己折腾,可以看看 MinIO, MinIO 是兼容 S3 的接口, 很成熟.

任务要拆分的足够细, 时间预估的误差就会小很多. 细到单个功能点,不得超过 2 天.