[英]How to rewind Job Bookmarks on Glue Spark ETL job?
我在這里讀過，現在 Glue 提供了為 Spark ETL 作業倒帶作業書簽的能力。
不過，我還沒有找到任何關於如何做到這一點的信息。 “暫停”作業書簽選項中的子選項似乎在倒帶作業書簽時很有用，但我找不到如何實現它們（我正在使用 Glue 控制台。）
您需要在“作業參數”部分傳遞以下參數。 作業書簽已暫停。
job-bookmark-from <from-value>是運行 ID，它表示在最后一次成功運行之前處理的所有輸入，包括指定的運行 ID。
job-bookmark-to <to-value>是運行 ID，它表示在最后一次成功運行之前處理的所有輸入，包括指定的運行 ID。 除了由 標識的輸入之外的相應輸入由作業處理。
如何減少膠水etl作業（火花）實際開始執行所花費的時間？
[英]How to reduce the time taken by the glue etl job(spark) to actually start executing?
是否可以在自定義格式文件上將作業書簽與 AWS Glue 作業結合使用？
[英]Is it possible to use Job Bookmarks with AWS Glue Job on a custom format file?
我什么時候對 etl 使用膠水作業或 Sagemaker 處理作業？
[英]When do I use a glue job or a Sagemaker Processing job for an etl?
如何使用 Scala Spark 在 AWS Glue 作業中設置 Spark Config？
[英]How to set Spark Config in an AWS Glue job, using Scala Spark?
如何使用 AWS CLI 或 boto3 倒回 AWS 粘合作業書簽
[英]How can I rewind an AWS glue job bookmark using the AWS CLI or boto3
聲明:本站的技術帖子網頁，遵循CC BY-SA 4.0協議，如果您需要轉載，請注明本站網址或者原文地址。任何問題請咨詢:yoyou2525@163.com.
