SSIS-平面文件源中的固定列数

Question

我在目录中有许多文本文件，这些文件具有由标签分隔的固定数量的列[6]。 我使用“平面文件源”块将其读入SSIS包中。 如果文件中的列数超过了所需的数目，或者任何列中的数据均丢失，我想拒绝该文件。

我已经对各种示例文件进行了一些测试。 每当我添加其他列时，程序都会接受这些文件。 当较少的列是好的时，它将引发错误。

但是，是否有一种方法可以指定文件必须具有一定数量的列，并且每列中必须存在数据？

我在SSIS方面没有太多经验，所以我将不胜感激。

谢谢

Answer 1

我将使用脚本任务来执行此操作。

您可以使用System.IO.StreamReader打开文件并读取标题行，然后对结果字符串执行所需的任何验证。

我还将在SSIS包中创建一个布尔变量，称为“ FileIsValid”，如果满足条件，我将向其写入（通过脚本任务）如果为True，则为False。 然后，我将使用优先约束使用它来指导程序包流。

像这样：

public void Main()
{
    System.IO.StreamReader reader = null;

    try
    {
        Dts.Variables["User::FileIsValid"].Value = false;

        reader = new System.IO.StreamReader(Dts.Variables["User::Filepath"].Value.ToString());

        string header = reader.ReadLine();

        if (header.Trim() == "Column1\tColumn2\tColumn3\tColumn4\tColumn5\tColumn6")
            Dts.Variables["User::FileIsValid"].Value = true;

        reader.Close();
        reader.Dispose();

        Dts.TaskResult = (int)ScriptResults.Success;
    }
    catch
    {
        if (reader != null)
        {
            reader.Close();
            reader.Dispose();
        }

        throw;
    }
}

关于检查所有列中是否都有数据，是否需要每一行？

您可以继续使用StreamReader阅读这些行，并使用正则表达式检查类似这样的内容。

Answer 2

扩展Chris Mack：

如果文件没有标题，则可以进行计数。

char[] delim = new char[] {'\t'};
if(header.Split(delim).Length() == 5)
...