带有转义字符的数据流模板元数据正则表达式定义

Question

我正在创建一个 Dataflow Flex 模板，我想定义输入参数，如此处记录https://cloud.google.com/dataflow/docs/guides/templates/using-flex-templates#metadata

我已经使用以下 JSON 配置了我的模板

{
  "name": "My name",
  "description": "my long description",
  "parameters": [
    {
      "name": "outputTopic",
      "label": "Pub/Sub ingest topic",
      "helpText": "Pub/Sub topic to publish result"
    },
    {
      "name": "bigQueryProject",
      "label": "BigQuery project",
      "helpText": "BigQuery google project"
    },
    {
      "name": "tempLocation",
      "label": "GCS Temp Location",
      "helpText": "GCS Location for storing temporary files",
      "regexes": [
        "gs://.*"
      ]
    },
    {
      "name": "startDate",
      "label": "Start Date",
      "isOptional": true,
      "helpText": "Start date in the format YYYY-MM-DD or use 'YESTERDAY' as default",
      "regexes": [
        "^TODAY$|^YESTERDAY$|^\\d{4}-\\d{2}-\\d{2}$"
      ]
    }
    }

它工作正常，因为如果我使用 Google 控制台，我可以看到正确定义的所有参数

但是，当我使用所有经过验证的参数执行作业时，请求因定义的 REGEX 无效而失败

"(fb57dedae5c9fead): Template metadata contains invalid POSIX regex '^TODAY$|^YESTERDAY$|^\\d{4}-\\d{2}-\\d{2}$': invalid escape sequence: \\d in \\d.

看起来，创建有效的 JSON 文件所需的正则表达式中的双精度 escaping 没有被 Dataflow 很好地解释。 提前致谢

Answer 1

您面临的错误是由于无效的正则表达式。 正如我在评论中提到的，您可以使用\\\\ 、(\\\\d) 解决此问题。

根据我的理解，您需要使用\\\\ ，这将在字符串中生成\\并在 RegEx 中生成\ 。您可以通过使用 RegEx 验证器来进一步了解这一点。

Answer 2

我认为你的| 没有按照您的预期进行解释。

您可以尝试使用这种格式吗？ 这是我看到经常使用的：

^(TODAY|YESTERDAY|\\d{4}-\\d{2}-\\d{2})$