繁体   English   中英

为数据流管道作业创建 gcloud 命令

[英]Creating a gcloud command for Dataflow Pipeline job

我们最近在 Google Cloud Console 中创建了一个数据流作业和管道。 出于记录目的,我想记录作业和管道的gcloud等效命令。 我设法确定了数据流作业的gcloud等效命令,但我无法弄清楚如何为数据流管道创建gcloud等效命令。

示例数据流作业 Gcloud 命令:

gcloud dataflow jobs run sample_dataflow_job --gcs-location gs://dataflow-templates-us-east1/latest/Jdbc_to_BigQuery --region us-east1 --num-workers 2 --staging-location gs://dataflow_single_region_us/writingdirectory --subnetwork https://www.googleapis.com/compute/v1/projects/sample-project/regions/us-east1/subnetworks/project_network --disable-public-ips --parameters connectionURL=jdbc:mysql://psql.gcp.sample.net:6033/sample,driverClassName=com.mysql.cj.jdbc.Driver,query=select * from datab,outputTable=bigquerytable:sample.sample_DataFlow_1,driverJars=gs://dataflow_single_region_us/jdbc_driver,bigQueryLoadingTemporaryDirectory=gs://dataflow_single_region_us/bigqueryloading,username=johnsmith,password=Password1

有什么想法可以获取 Dataflow Pipeline 解决方案的gcloud命令吗?

我仔细研究了云 sdk 文档,发现该功能是几天前发布的,请查看Google Cloud CLI - Release Notes about cloud datapipelines 尽管如此,它仍处于测试阶段 您可以查看gcloud beta datapipelines页面以了解更多详细信息。

由于此功能仍处于beta ,因此支持可能有限。 不建议在生产环境中使用它,目前仅用于测试。 目前,我认为我们将不得不等到它完全发布。

暂无
暂无

声明:本站的技术帖子网页,遵循CC BY-SA 4.0协议,如果您需要转载,请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.

 
粤ICP备18138465号  © 2020-2024 STACKOOM.COM