使用不同参数触发相同的胶水作业
[英]Trigger same Glue Job with Different Parameters
问题描述
I have a Glue job which I want to execute twice each time with few parameters changing.
我有一个 Glue 作业，我想每次执行两次，但参数很少改变。 Is it possible to achieve this?有可能实现这一目标吗？
1 个解决方案
解决方案1
0 2022-12-26 18:41:37
Yes it possible.是的，有可能。 You can Create one lambda which will generate one output which has 2 sets of parameter for each run as per requirement.您可以创建一个 lambda，它将生成一个 output，它根据要求为每次运行提供 2 组参数。 Setup the Step-Function, in that step function you can pass the JSON ie the output of Lambda to Glue job as input-parameter设置步进函数，在该步骤 function 中，您可以将 JSON 即 Lambda 的 output 作为输入参数传递给 Glue 作业
声明:本站的技术帖子网页，遵循CC BY-SA 4.0协议，如果您需要转载，请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.
相关问题
是否可以创建将使用多个参数运行相同作业的 AWS Glue 工作流？ - Is it possible to create AWS Glue workflow that will run the same job with multiple parameters?
AWS：从步骤 function 将作业参数值传递给 Glue 作业 - AWS : Passing Job parameters Value to Glue job from Step function
Glue Workflow 或 Trigger 能否从 EventBridge 获取参数 - Can Glue Workflow or Trigger get parameters from EventBridge
可重复使用的 AWS Glue 作业 - Reusable AWS Glue Job
将粘合作业连接到 Amazon 键空间 - Connect glue job to Amazon keyspaces
aws glue cloudformation镶木地板工作 - aws glue cloudformation parquet job
如何为 AWS 胶水工作使用额外的文件 - How to use extra files for AWS glue job
运行胶水作业时出现 InvocationTargetException - getting InvocationTargetException when running my glue job
胶水 PySpark 作业因资源问题而失败 - Glue PySpark job failing with resource issues
AWS Glue 作业 - 将 CSV 转换为 Parquet - AWS Glue Job - Convert CSV to Parquet
相关标签