截断表时无需等待

Question

我有一个SSIS程序包，它在1小时后可以重复运行。 该程序包首先截断一个表，然后用新数据填充该表。 这个过程需要15到20分钟。 运行该程序包时，用户无法使用数据。 因此，他们必须等到程序包完全运行。 有什么方法可以处理这种情况，使用户不必等待吗？

Answer 1

不要截断表。 而是添加具有日期数据类型的审计列，在该审计列上按小时划分分区表，并在新分区加载新数据后删除旧分区。

确保在审核列的帮助下将用户查询定向到正确的分区

Answer 2

您可以进行“ AB翻转”。

您可以使用两个表来完成工作，而不必截断面向客户的表并重新加载它。

例如，如果有问题的表称为ACCOUNT：

1. 将数据加载到名为STG_ACCOUNT的表中
2. 将ACCOUNT重命名为ACCOUNT_OLD
3. 将STG_ACCOUNT重命名为ACCOUNT
4. 将ACCOUNT_OLD重命名为STG_ACCOUNT

通过这样做，可以最大程度地减少用户拥有空表的时间。

Answer 3

这是非常危险的做法，但是您可以将事务的隔离级别（我的意思是用户查询）从ReadCommitted / Serializable更改为ReadUncommitted。 但是，这种查询的行为很难预测。 如果您的表正在使用SSIS包（插入/删除/更新），并且最终用户进行了一些未提交的读取（例如SELECT * FROM Table1 WITH（NOLOCK）），则某些行可能被计数多次或丢失。

如果用户只想读取“新小时数据”，则可以尝试将隔离级别更改为“脏读”，但要小心！

如果他们可以使用前一小时的数据，则Arnab将描述最佳解决方案，但是分区仅在企业版中可用。 正如Zak所说，在另一个SQL Server版本中使用重命名。

[更新]如果主延迟（如您所说，数十分钟）是由于复杂的计算（而不是由于加载的行数！）引起的，则可以使用另一个表，例如缓冲区。 在那里存储几行（数百行，数千行等），然后将它们重新加载到主表中。 因此，新数据将分部分提供，而无需“脏读”技巧。