簡體   English   中英

爬蟲因內部問題而失敗

[英]crawler failed with internal issues

我在 S3 存儲桶上運行爬蟲,它的大小是 2gb。每當我嘗試運行爬蟲時,它都會因內部服務異常而失敗

有什么解決辦法嗎?我被困在這里

我也使用過此鏈接,但沒有提供很多幫助https://aws.amazon.com/premiumsupport/knowledge-center/glue-crawler-internal-service-exception/?nc1=h_ls

需要你的建議

2021-08-09T13:56:05.984+02:00   [60c350cc-eab6-4510-aa4a-cdee286d819a] ERROR : Internal Service Exception

前段時間我也發生了類似的事情,我也檢查了你分享的文檔,但它也沒有幫助我,在我的情況下情況不同,簡而言之,當我第一次運行爬蟲時一切正常,之后我從其中一個表中對模式進行了修改,此更改涉及分區是什么,幾天后我再次運行它並收到該錯誤,為了修復它我做了以下操作:

  • 我再次運行它,錯誤仍然存在
  • 我取了更改后的表
  • 然后我只刪除了那個表
  • 我又跑了爬蟲
  • 最后結果成功了

我不記得是否讀過這種情況,但我不得不面對它,在這種情況下,正如你所注意到的,我自己造成了它,我希望它能幫助你,成功

暫無
暫無

聲明:本站的技術帖子網頁,遵循CC BY-SA 4.0協議,如果您需要轉載,請注明本站網址或者原文地址。任何問題請咨詢:yoyou2525@163.com.

 
粵ICP備18138465號  © 2020-2024 STACKOOM.COM