如何解析 Json Object 包含动态属性的元素

Question

我们有一个 Json object 结构如下。

{
  "results": {
    "timesheets": {
      "135288482": {
        "id": 135288482,
        "user_id": 1242515,
        "jobcode_id": 17288283,        
        "customfields": {
          "19142": "Item 1",
          "19144": "Item 2"
        },
        "attached_files": [
          50692,
          44878
        ],
        "last_modified": "1970-01-01T00:00:00+00:00"
      },
      "135288514": {
        "id": 135288514,
        "user_id": 1242509,
        "jobcode_id": 18080900,
        "customfields": {
          "19142": "Item 1",
          "19144": "Item 2"
        },
        "attached_files": [
          50692,
          44878
        ],
        "last_modified": "1970-01-01T00:00:00+00:00"
      }}

我们需要访问结果中的元素 --> 时间表 --> 动态 ID。

例子：

{
        "id": 135288482,
        "user_id": 1242515,
        "jobcode_id": 17288283,        
        "customfields": {
          "19142": "Item 1",
          "19144": "Item 2"
        },
        "attached_files": [
          50692,
          44878
        ],
        "last_modified": "1970-01-01T00:00:00+00:00"
      }

问题是 "135288482": { 是动态的。 我们如何访问其中的内容。

我们正在尝试创建数据流来解析数据。 数据是动态的，因此无法通过属性名称进行访问。

Answer 1

AFAIK ，根据您的 JSON 结构和动态键，使用数据流可能无法获得所需的结果。 我已经复制了上面的内容，并且能够像下面这样使用 set variable 和 ForEach 来完成它。

在您的 JSON 中， id 的键和值是相同的。 所以，我首先用它来获取键列表。 然后使用该密钥列表，我能够访问内部 JSON object。

这些是我在管道中的变量：

• 首先，我有一个字符串类型的集合变量，并在其中存储了"id" 。

• 然后我进行了查找活动以从 blob 中获取上述 JSON 文件。

• 我使用下面的动态内容@string(activity('Lookup1').output.value[0].results.timesheets)将查找时间表对象存储为设置变量中的字符串

• 我在带有"id"的字符串上使用了 split，并将结果数组存储在数组变量中。 @split(variables('jsonasstring'), variables('ids'))这将给出如下所示的数组。

  

• 现在，我对这个数组使用了一个Foreach ，但跳过了第一个元素。 在每次迭代中，我将字符串的前 9 个索引取到 append 变量，这是关键。 如果您的 id 值和键不相同，那么您可以跳过拆分数组中的最后一个，并根据您的要求从字符串的反面获取键。 这是我在 ForEach @take(item(), 9)中的 append 变量活动的动态内容

• 然后我拿了另一个 ForEach，并给它这个键列表数组。 在 foreach 中，您可以使用以下动态内容访问 JSON。 @string(activity('Lookup1').output.value[0].results.timesheets[item()])

这是我的管道 JSON：

{
"name": "pipeline1",
"properties": {
    "activities": [
        {
            "name": "Lookup1",
            "type": "Lookup",
            "dependsOn": [
                {
                    "activity": "for ids",
                    "dependencyConditions": [
                        "Succeeded"
                    ]
                }
            ],
            "policy": {
                "timeout": "0.12:00:00",
                "retry": 0,
                "retryIntervalInSeconds": 30,
                "secureOutput": false,
                "secureInput": false
            },
            "userProperties": [],
            "typeProperties": {
                "source": {
                    "type": "JsonSource",
                    "storeSettings": {
                        "type": "AzureBlobFSReadSettings",
                        "recursive": true,
                        "enablePartitionDiscovery": false
                    },
                    "formatSettings": {
                        "type": "JsonReadSettings"
                    }
                },
                "dataset": {
                    "referenceName": "Json1",
                    "type": "DatasetReference"
                },
                "firstRowOnly": false
            }
        },
        {
            "name": "JSON as STRING",
            "type": "SetVariable",
            "dependsOn": [
                {
                    "activity": "Lookup1",
                    "dependencyConditions": [
                        "Succeeded"
                    ]
                }
            ],
            "userProperties": [],
            "typeProperties": {
                "variableName": "jsonasstring",
                "value": {
                    "value": "@string(activity('Lookup1').output.value[0].results.timesheets)",
                    "type": "Expression"
                }
            }
        },
        {
            "name": "for ids",
            "type": "SetVariable",
            "dependsOn": [],
            "userProperties": [],
            "typeProperties": {
                "variableName": "ids",
                "value": {
                    "value": "@string('\"id\":')",
                    "type": "Expression"
                }
            }
        },
        {
            "name": "after split",
            "type": "SetVariable",
            "dependsOn": [
                {
                    "activity": "JSON as STRING",
                    "dependencyConditions": [
                        "Succeeded"
                    ]
                }
            ],
            "userProperties": [],
            "typeProperties": {
                "variableName": "split_array",
                "value": {
                    "value": "@split(variables('jsonasstring'), variables('ids'))",
                    "type": "Expression"
                }
            }
        },
        {
            "name": "ForEach to append keys to array",
            "type": "ForEach",
            "dependsOn": [
                {
                    "activity": "after split",
                    "dependencyConditions": [
                        "Succeeded"
                    ]
                }
            ],
            "userProperties": [],
            "typeProperties": {
                "items": {
                    "value": "@skip(variables('split_array'),1)",
                    "type": "Expression"
                },
                "isSequential": true,
                "activities": [
                    {
                        "name": "Append variable1",
                        "type": "AppendVariable",
                        "dependsOn": [],
                        "userProperties": [],
                        "typeProperties": {
                            "variableName": "key_ids_array",
                            "value": {
                                "value": "@take(item(), 9)",
                                "type": "Expression"
                            }
                        }
                    }
                ]
            }
        },
        {
            "name": "ForEach to access inner object",
            "type": "ForEach",
            "dependsOn": [
                {
                    "activity": "ForEach to append keys to array",
                    "dependencyConditions": [
                        "Succeeded"
                    ]
                }
            ],
            "userProperties": [],
            "typeProperties": {
                "items": {
                    "value": "@variables('key_ids_array')",
                    "type": "Expression"
                },
                "isSequential": true,
                "activities": [
                    {
                        "name": "Each object",
                        "type": "SetVariable",
                        "dependsOn": [],
                        "userProperties": [],
                        "typeProperties": {
                            "variableName": "show_res",
                            "value": {
                                "value": "@string(activity('Lookup1').output.value[0].results.timesheets[item()])",
                                "type": "Expression"
                            }
                        }
                    }
                ]
            }
        }
    ],
    "variables": {
        "jsonasstring": {
            "type": "String"
        },
        "ids": {
            "type": "String"
        },
        "split_array": {
            "type": "Array"
        },
        "key_ids_array": {
            "type": "Array"
        },
        "show_res": {
            "type": "String"
        }
    },
    "annotations": []
}
}

结果：

在动态内容中使用@json()将以下字符串转换为 object。

如果要将此 JSON 存储在文件中，请使用 ForEach 并在 Foreach 内部使用 SQL 脚本在每次迭代中使用JSON_VALUE将每个 object 作为一行复制到表中。 然后在 Foreach 外部使用复制活动根据您的要求将 SQL 表复制到您的目的地。