繁体   English   中英

数据块中表中的 Azure 存储帐户文件详细信息

[英]Azure Storage Account file details in a table in databricks

我正在通过 ADLS gen2 容器中的管道加载数据。

现在我想创建一个表,其中包含管道何时开始运行然后完成的详细信息。 像下面的字段 startts - 工作的开始时间 endts - 工作的结束时间,但 extractts 是我想要创建的提取时间.. 有什么方法我可以创建表吗? 帮助将不胜感激。

在此处输入图像描述

它可能不是您所需要的,但您可以使用属性 @pipeline().TriggerTime 在复制活动中添加列以获取“startts”字段。 转到源选项卡上的底部选项并选择新建,然后在值上选择“添加动态内容”。

这是一个例子在此处输入图像描述

对于您的“extractts”,您可以使用名为“executionDuration”的活动属性,这将为您提供 adf 以秒为单位运行活动所需的时间。 同样,使用动态内容并获取:@activity('ReadFile').output.executionDuration,然后将此值存储在您需要的任何地方。

在此示例中,我将值存储在变量中,但您可以在任何地方使用它。 在此处输入图像描述

我不明白你需要一个字段“endts”,我只是简单地做 startts+extractts 来得到它。

暂无
暂无

声明:本站的技术帖子网页,遵循CC BY-SA 4.0协议,如果您需要转载,请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.

 
粤ICP备18138465号  © 2020-2024 STACKOOM.COM