cost 173 ms
map数据流参数如何到Sink SQL表 - How to map Data Flow parameters to Sink SQL Table

我需要将一个或多个数据流参数存储/映射到我的接收器(Azure SQL 表)。 我可以从 REST Api 获取其他数据,并且能够将这些数据 map 到我的 Sink 列(见下文)。 我还需要生成一些 UUID 作为关键字段并将它们添加到同一个表中。 我希望我的 EmployeeId 列包含我的数据 ...

从存储帐户的年/月/日目录中获取所有文件时,如何将修改日期作为表中的列获取? - How to get modified date as column in table while ingesting all files from year/month/date directories of storage account?

我在 ADLS 帐户中有一些 json 文件。 这些文件以多个年/月/日目录结构摄取。 我想使用 azure 数据流将所有文件从 ADLS 复制到 Azure SQL DB。 我能够使用数据流提取数据,但我想在三个单独的列中包含文件路径、文件提取日期和文件名,但我不知道如何获取这些值。 请注意,每 ...

Azure 数据工厂 DataFlow 错误:键分区不允许计算列 - Azure Data Factory DataFlow Error: Key partitioning does not allow computed columns

我们有一个适用于许多表的通用数据流,在运行时检测模式。 我们正在尝试为增量的摄取或接收器部分添加一个分区列。 我们收到错误:Azure 数据工厂 DataFlow 错误:键分区不允许计算列作业失败,原因是:源“摄取”(第 7 行/第 0 行):键分区不允许计算列我们可以将分区列作为参数传递给通 ...

如何向 ADF 数据流中的数据集添加行 - How do I add a row to a dataset in ADF dataflows

ADF 新手,需要一些帮助,我有一个 2 列数据集,我想向该数据集添加一个额外的行。 我有列:“CHANNEL”和“CHANNEL_ID”,其值如下Source Data set并想添加字段:“0”和“blank”到这些列以产生低于Desired outcome的结果。 在我的数据流中是否可以进行 ...

ADF 数据流 在构建 JSON 文件时删除空的 JSON 对象和 arrays - ADF Data Flow Remove empty JSON objects and arrays when building JSON files

我在 Azure 数据工厂中使用数据流将 CSV 文件的行转换为标准布局的 JSON 文档。 当没有数据要填充时,我不知道如何摆脱空的 JSON 对象和 arrays。 例如,如果我有如下所示的 CSV: 我需要把它变成这样: 我正在使用派生列来构建子列和 arrays。我已经能够生成上面的 JS ...

根据文件中的附加标头在 Azure 数据工厂中拆分 CSV 文件 - Split CSV file in Azure Data Factory based on additional headers in file

我目前收到 csv 个文件,格式如下: 每个 header 的行数可以变化,标题可以包含任何单词。 预期结果应该是以下之一:选项 1:将标题保存到 1 个文件中的附加列文件:abc/abc/complete_output 选项 2:根据 header 创建不同的文件:File1:abc/abc/He ...

Azure数据流动态聚合转换中GroupBy如何添加列 - How to add columns in GroupBy in Aggregate transformation dynamically in Azure Data Flow

我有 200 列,其中 100 列需要在 GroupBy 中。因此手动添加 100 列非常痛苦,单击下拉列表,选择列。以这种方式添加列需要更多时间。 有什么办法可以减少一次将 groupBy 中的 100 列加起来的时间。 ...

识别列中的部分文本并在 Azure 数据流中创建新列? - Identify partial text in the column and create new column in Azure Data Flow?

我的数据中有一个名为“类型”的下方文本列在此处输入图像描述我想查找列是否有年度或每月并创建名为“季节”的新列。 季节列应该有年度、每月或无预计 Output 在此处输入图像描述我正在使用派生列,但不确定如何提取列中的部分文本。 谁能建议如何做到这一点? ...

Azure 数据工厂 REST 调用将所有日期时间值显示为 null - Azure Data Factory REST call shows all datetime values as null

我有一个 ADF 数据流,它使用类型为 rest 的预定义数据集作为源。 从发出 get 请求的那一刻起,ADF 将所有日期时间值显示为 null。诸如Azure 数据工厂数据流静默 NULLing 日期列之类的问题表明这是 adf 如何转换值的问题,我应该拦截该值在那之前应用我自己的铸造逻辑。 ...

如何在 Azure 数据流中执行循环类型的逻辑 - How to Perform for loop type of logic in Azure Data FLow

这是我的要求: 基本上在 for 循环中有 3 件事:初始化、条件、循环所以我必须基于 for 循环逻辑为每一行生成一行,例如: 初始化: {Start_Rcvd Date} (我表中的列) 条件: DateBetweenDRO (新列) <= {WIP AGE DATE} (我表中的列) 循 ...

Azure 数据流隔离-查找子字符串形式的文本字段 - Azure Data Flows isolate-find substrings form text field

我试图从包含文本(字符串)的镶木地板文件的特定列中分离出几个子字符串。 子字符串都在一个数组中,我只想保留那些包含一个或多个这些子字符串的行 - 单词,同时我保留一个新列,其中包含在文本中找到的子字符串。 我目前使用了以下转换: 来源:这是我使用的镶木地板文件派生列:我在其中创建一个新列(单词),其 ...

如何将查找活动的输出设置为变量 - How to set the output of a lookup activity to a variable

我想将查找活动的输出存储为数组类型的变量,并在后续的 foreach 活动中使用它。 查找活动的输出如下图所示。 查看活动输出 } 我只想在此输出中选择“Horizon_Week_2022”并将变量设置为包含 52 个项目的数组。 但是,据我所知,我不知道如何设置变量。 你能告诉我吗? 任何答案将 ...

Azure 数据工厂数据流:如何筛选具有多个值的输入列 - Azure Data Factory Data Flow: how to filter input column with multiple values

我想做的基本上是在数据流中模拟 SQL WHERE IN CLAUSE 的东西。 我想将逗号分隔的字符串值传递到我的数据流中,即 ptf_proc_link_id = "A, B, C"。 在数据流内部,我想使用这些值来过滤我的输入列之一: 这等同于在 SQL 中编写 SELECT * FROM ...

我们可以直接在数据流活动中使用查找活动的输出,而无需在数据流中提供任何数据集吗? - Can we use output of look up activity directly in Data flow activity without giving any dataset in the dataflow?

我正在使用查找活动来读取我在 Oracle 中的表。我希望查找的输出成为数据流的源,因为在数据流设计器中我无法在源端连接 Oracle,Oracle 连接器在数据流级别不可用。 那么是否有可能以这种方式或是否有任何有效的方式来做到这一点。 ...

如何获取最大值并将其替换为数据工厂的驱动列 - How to take max value and replace it in drived colomn in data factory

我是天蓝色数据工厂的新手。 我需要以下实施方面的帮助 - 输入: 键,列 3 1,5 2,6 3,7 期望的输出: 键,列 3 1,3 2,6 3,7 这里key=1,col3值替换成3(key的最大值) 我需要用另一列的最大值替换一列数据。 我想取键列的最大值并将 column3 中的 ...


 
粤ICP备18138465号  © 2020-2024 STACKOOM.COM