执行 SSIS 任务验证时间过长

Question

我有一个 SSIS 数据流任务，在执行时需要将近 20 分钟来验证。 这是我是直接在 VS 中运行，还是从 SSMS 执行包。 在进行一些更改之前，任务已在几分钟内完成。

我所做的唯一更改是：

1. 将 OLE DB 输入（本任务中的两个）从直接连接到源表更改为连接到表的视图。 这些视图非常简单 - 只需加入另一个小表即可附加特定列。 输入一有大约 300 万行，输入 2 有几十万行。

2. 修改了现有的lookup transform（我认为更好），将连接改为“SELECT col1, col2 FROM”，而不是直接连接到这个表，非常宽。

在进行这些更改之前，此任务已在几分钟内完成。 现在，虽然数据流部分在 1-2 分钟内完成，但每个验证阶段（有两个）需要 17-20 分钟。

将视图作为输入是否会使验证阶段复杂化？

Answer 1

一般方法 - 逐步撤消/重做并查看差异。 因此，您可以调用定位问题转换。
根据经验 - 第二次更改是性能提升，无论是验证还是运行时。 SELECT * FROM （当您从 Lookup 中的列表中选择一个表时执行）运行和验证的速度并不比SELECT Col1, Col2 FROM快。 此外，通过这样做，您减少了 RAM 占用空间。
使用连接从表切换到视图可能是问题的根源。 视图可能有执行计划和资源消耗操作，如嵌套循环等。所以，我会检查视图执行计划，并首先在 SSIS 包中撤消此开关。