SQL-Server数据库的实际限制

Question

我正在建立一个预计会很大的数据库，用于计算和数据存储。 这将是一个包含10个字段的表，其中包含一个主键和两个自身的外键。 我预计每天将增加大约十亿条记录。

每条记录应该很小，我主要是进行插入。 对于每个插入，我将需要对连接记录的一个或两个字段进行简单的更新。 所有查询都应该相对简单。

我将以多少大小开始遇到sql-server的性能问题？ 我已经提到过vldb系统，但也听说过它们可能是真正的痛苦。 我应该开始考虑这个阈值吗？ 有没有比针对此类事情设计的sql-server更好的数据库？

Answer 1

当谈论超过10k / sec的事务速率时，您不应该在论坛上提出建议...这接近TPC-C在32和64种方式上的基准性能，这花费了数百万美元。

您将以多大的规模遇到问题？

有了良好的数据模型和架构设计，经过适当调整并具有正确容量的计划服务器将不会出现10亿美元的问题。 每天的记录。 最新发布的SQL Server基准测试约为120万tran / min。 这大约是每秒1.6万笔交易，在2005年该系统的价格约为600万美元（64路Superdome）。 为了达到计划的负载10k tran / sec，您将不需要Superdome，但您将需要一个功能强大的系统（可能至少16种方式），尤其是一个非常非常好的I / O子系统。 进行信封容量规划时，通常会考虑每个HBA约1K tran / sec，并为4个CPU内核提供HBA。 您将需要大量的数据库客户端（应用程序中间层）来满足10亿的需求。 每天记录到数据库中。 我并不是说我在这里进行了容量规划，但我只是想向您介绍我们在说什么。 这是一个耗资数百万美元的项目，而这样的事情并不是通过在论坛上征求意见而设计的。

Answer 2

除非您像Google的索引类型那样讲大话，否则SQL Server或Oracle这样的企业数据库就可以了。

在Coding the Wheel上的James Devlin很好地总结了这一点（尽管这更多是MySQL和Oracle / SQL Server这样的免费数据库之间的比较。

如今，我喜欢将SQL Server和Oracle视为关系数据库领域的死星。 极其强大。 单片。 辉煌。 复杂性几乎超出了人类单一思维所能理解的能力。 这是巨大的金钱浪费，但在极少数情况下，当您实际上需要销毁一颗行星时除外。

就性能而言，这实际上取决于您的索引策略。 插入实际上是这里的瓶颈，因为记录在进入时需要进行索引，因此索引越多，插入所需的时间就越长。

对于类似Google的索引（在“大表”上阅读）的情况，很有趣的是Google如何将其设置为使用服务器集群来在短短的毫秒内处理大量数据的搜索。

Answer 3

可以做到，但是考虑到您的硬件成本和计划，MS可以为您确定一切。 这只是您硬件成本的一小部分。

这样说，保罗·尼尔森（Paul Nielson）在2年前发布了约35,000 TPS （每天30亿行）的博客 。 评论也值得一读，并反映了雷木思所说的一些话

Answer 4

数据库本身的大小不会造成性能问题。 数据库大小的实际问题来自运营/维护问题。

例如：

1. 碎片整理和重建索引花费的时间太长。
2. 备份时间过长或占用太多空间。
3. 发生故障时，数据库还原不能足够快地执行。
4. 将来对数据库表所做的更改将花费很长时间才能应用。

我建议从一开始就以某种分区进行设计/构建。 它可以是SQL Server分区，应用程序分区（例如，每月一个表），归档（例如，到不同的数据库）。

我相信这些问题都会出现在任何数据库产品中。

另外，请确保考虑事务日志文件的大小。