No-SQL数据库获取大价值

Question

我正在寻找一个键值存储，它可以处理一些千兆字节的值。 我看过Riak ， Redis ， CouchDb和MongoDB 。

我想在此数据库中存储用户的工作空间（等于文件系统中的目录，并递归包含子目录和文件）。 当然，我可以使用文件系统，但随后就没有像Redis这样的功能，例如在RAM中缓存，故障转移解决方案，备份和复制/群集。

这意味着，保存的大多数值将是二进制数据，最终是几千兆字节，因为工作空间中的一个文件被映射到一个键值键值。

有没有人对这些产品有任何经验？

Answer 1

首先，从GB的数据大小中获取MD5或CRC32的计算将非常痛苦。 最好避免这种情况。 如何将数据存储在文件中并为文件名编制索引？

但是，如果您坚持要说的话，我的建议仍然是只存储哈希，而不是整个数据值，并在最终数据位置存储一个查找数组/表。 这种方法的安全性（非唯一可能性）将随大量样品的数量而直接变化。 您创建的哈希值越长-32位vs 64位vs 1024位，等等-也越安全。 多数使用编程语言的字典系统或数据库引擎都将具有二进制数据存储机制。 如果失败，则可以在char列中存储与哈希值相对应的十六进制值的字符串。

Answer 2

我们现在正在使用MongoDB，因为它支持大二进制值，非常受欢迎并且拥有庞大的用户群。 也许我们将要切换到另一家商店，但是目前看起来非常不错！