存储几百 G 到上 T 的数据库怎么架构

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

这是一个创建于 3533 天前的主题，其中的信息可能已经有所发展或是发生改变。

用爬虫爬了很多网页数据，按速度很快会几百 G 到几个 T 。
话说这些数据怎么存储和建站展示？对一个个人开发者来说性价比高？
本身不是做运维的，面对这数据了有点不知所措。。

目前数据库是 mongodb

1 条回复 • 2016-05-12 14:00:08 +08:00

cuiqiangtj

2016 年 5 月 12 日

先看会有什么查询在考虑怎么存,
mongo 只要加好索引,查询速度还凑活,前提是你别有太诡异的查询
有些查询能虽然能实现,不过速度不敢保证.