在Mongo DB上存储100TB的数据？可行吗？

Question

9

需要什么样的架构来存储100TB的数据并进行聚合查询？需要多少个节点？每个节点的磁盘大小是多少？最佳实践是什么？

每天将写入240GB的数据，但由于相同数量的数据将被删除，因此大小将保持不变。

或者关于存储数据和快速分组查询的任何不同想法？

- canseverayberk

是的，相关问题已经过时了，因为自那以后用户组中出现了更大的场景。 - Sammaye

1

您使用了vertica标签。您是否也想要一些关于它的信息？ - geoffrobinson

2个回答

3

我强烈推荐使用 HBase。

Facebook将其用于消息服务，截至2010年11月，该服务每天处理150亿条消息。

我们尝试了MongoDB用于一个大型数据集，但最终选择了HBase并且现在已经快乐地使用了数个月。

- Suman

1

你是如何处理基础设施管理的？我们是一家小型创业公司，目前还没有足够的资源来做到百分之百。 - noli

2

抱歉，也许我没有理解 - 您所说的基础设施管理是什么意思？您是指管理Hadoop / HBase集群吗？我们使用了Amazon Elastic MapReduce。 - Suman

网页内容由stack overflow 提供, 点击上面的

可以查看英文原文，
原文链接

- Samuel Liew · Accepted Answer

请参考相关问题，

引用顶部答案:

MongoDB网站上的"生产部署"页面可能对您有帮助。列出了大量具有基础架构信息的演示文稿。例如:

http://blog.wordnik.com/12-months-with-mongodb说他们每个节点存储3 TB。