[英]cdk SageMaker.CfnModel outputs empty containers property when passed model package arn
當我嘗試將 model package 傳遞給 cdk CfnModel 時,模板 output 的字典為空。 然后輸入檢查需要一個對象數組,但是我傳遞的任何內容都不會在模板 output 中結束。這里有什么問題? 鑒於下面的輸入,我期望容器屬性設置為 {"ModelPackageName": m ...
[英]cdk SageMaker.CfnModel outputs empty containers property when passed model package arn
當我嘗試將 model package 傳遞給 cdk CfnModel 時,模板 output 的字典為空。 然后輸入檢查需要一個對象數組,但是我傳遞的任何內容都不會在模板 output 中結束。這里有什么問題? 鑒於下面的輸入,我期望容器屬性設置為 {"ModelPackageName": m ...
[英]AWS Sagemaker: Can I pass a sagemaker.workflow.parameters.ParameterString to an SKLearnProcessor
我正在致力於創建 Sagemaker 管道。 在評估步驟中,我想將一個參數傳遞給我的preprocess.py腳本。 有幾個在線示例說明如何執行此操作(下面的示例),但它們都使用 static 值。 我想將工作流參數(在本例中為字符串)傳遞給腳本。 我嘗試了多種方法但無濟於事,我什至打開了一個Gi ...
[英]Sagemaker Inference Endpoint with fitted Encoder
因此,由於我無法通過閱讀文檔和博客文章獲得任何幫助,所以我會在這里提問: 我想部署一個 Sagemaker 端點來安裝 Sagemaker 管道。 我想要一個由 PipelineModel 支持的端點。 這個 PipelineModel 應該由兩個模型組成:一個擬合的 model 對我的數據進行編碼 ...
[英]What if i say ” sagemaker async is nothing but a task queue which use ML type instances.”
如果我們運行 celery 任務或另一個任務隊列(如 rabbit MQ)中的所有推理代碼,我們將獲得相同的性能(如果我們忽略 ML 類型實例的影響)。 如果我們將 sagemaker async 用於非常規 ML model,我們將獲得哪些主要好處? ...
[英]Get Sagemaker pipeline execution id within pipeline steps
您好,我認為我的問題很簡單,但嘗試用谷歌搜索答案時,我看到了其他信息:在不同的 Sagemaker 管道步驟(例如 ClarifyCheckStep)中,我想獲取管道執行 ID,以便我可以很好地保存不同步驟的 output 和構建我的 output 的保存。有人有想法嗎? 管道執行變量似乎不能以字 ...
[英]Getting byte type object in prediction
我正在獲取從數據預測 function 返回的字節類型值。 <類'字節'> b'{“概率”:[[0.9999768137931824,2.3188162231235765e-05]]}' ...
[英]Why can I not import sagemaker in python?
我在嘗試導入 sagemaker package 時突然開始出現導入錯誤: 查看錯誤的來源讓我認為它是: 我通常運行代碼的其他部分,所以這個導入可能在幾個月前就被破壞了。 這部分代碼沒有測試,我也不經常運行。 我嘗試刪除我的 python 環境並全新安裝 Sagmaker,但仍然失敗。 這是包裹。 ...
[英]Connect to Neptune DB with SageMaker
我能夠從 Neptune Notebooks 中成功測試我與 Neptune DB 的連接,並且能夠毫無問題地執行批量加載和查詢,但是當嘗試連接到 SageMaker studio 時,出現連接錯誤。 我嘗試使用推薦的方式使用 gremlin-python 庫。 還有什么我需要做的嗎? 我是否需要 ...
[英]An error occurred (ModelError) when calling the InvokeEndpoint operation: Received server error (500). Calling the endpoint from lambda+ api gateway
My sagemaker endpoint seems to be working while calling from lambda function but when I am using same payload from api gateway rest api (rest api dep ...
[英]how to configure default bucket in sagemaker pipeline?
我正在通過 sagemaker 管道在 amazon sagemaker/studio 中對訓練模型進行一些實驗。 基於示例/aws 文檔,在我的筆記本(下面的示例代碼)中,在我的 jupyter 筆記本中,我設置了 sagemaker session,通過如下所示的代碼執行角色。 此外,還設置了 ...
[英]AWS MLOps - Do we need dev/test environments for the model-development environment that data scientist work on (SageMaker))
假設我有 AWS 賬戶: DEV(數據科學家使用 SageMaker notebooks/studio 積極探索數據和開發模型) 測試(發生 model 監視器的地方) Prod(托管接受的 model) 我的問題是,從工程的角度來看,對於上面提到的 DEV env,因為數據科學家的工作需要它 ...
[英]how to run only training step in a sagemaker pipeline?
根據文檔,我們可以創建不同的步驟並在 sagemaker 管道中將它們鏈接在一起,但我想知道,如果我只想運行一個訓練步驟,而不需要處理步驟,如下例所示,我能否通過 s3 location 作為參數,而不是上一步中的 output,即 step_process。 或者換句話說,我如何傳遞 s3 位置 ...
[英]how to use csv data to train a hugging face model?
我想微調一個預訓練好的DistilBERT(基於BERT架構的transformer model)model可用Hugging Face。 我做了一些數據清理/預處理步驟以生成 csv 數據並上傳到 s3 存儲桶。 基於此處提供的示例 ( https://github.com/aws-sample ...
[英]how to convert jupyter notebook training code to sagemaker pipeline steps?
我是 sagemaker 管道的新手,正在研究如何不僅在 jupyter notebook 中訓練模型,而且我想在 sagamaker studio 中將其設置為 sagemaker 管道。 我嘗試並遵循了一些基於此處提供的博客/文檔的示例 -> https://aws.amazon.com ...
[英]Graphviz running on SageMaker notebook instance but not SageMaker Studio
我正在使用 PyTorch/Graphviz 運行 python 腳本。 它在 SageMaker 筆記本實例中執行,但不在 SageMaker Studio 中執行。 看起來帶有 kernel conda_pytorch_p39的筆記本實例已經包含了 Graphviz 的安裝,所以腳本按原樣工作, ...
[英]How to pip in SageMaker Studio Lab
enter image description here我想在 jupyter 實驗室中使用 pip matminer 但失敗了。 如果有人知道為什么以及如何解決問題錯誤:由於 OSError 無法安裝包:[Errno 2] 沒有這樣的文件或目錄:'/home/studio-lab-user/. ...
[英]`Not a directory: '/home/sagemaker-user/XXX` Error downloading wheelfiles from s3 to SageMaker studio
我將幾個包( tar.gz和whl文件)上傳到 s3,我想將它們下載到 SageMaker Studio 中的 Juypter noteook。 當我運行aws s3 cp s3://bucket-name/dependencies/ dependencies_from_s3/它一直給我錯誤down ...
[英]Run sagemaker jupyter notebook using aws cli
我在 aws sagemaker 中有一個“筆記本實例”,這個實例有很多筆記本。 有什么方法可以使用 aws cli(shell)單獨啟動筆記本並檢查它們的當前狀態(運行、停止等)? 如果沒有,我可以使用哪些方法以編程方式執行上述操作? ...
[英]Deploy TensorFlow probability regression model as Sagemaker endpoint
我想在本地開發一個TensorFlow 概率回歸 model並部署為 Sagemaker 端點。 我之前已經像這樣部署了標准 XGB 模型,並且了解到可以像這樣部署 TensorFlow model: 但是,我認為這不會涵蓋例如依賴項: 我需要使用腳本模式還是 Docker? 任何指針將不勝感激。 ...
[英]Remove/Edit feature definitions from AWS Sagemaker Feature Group
如何從我的 AWS Sagemaker 功能組中編輯/刪除功能定義(名稱/類型)? 從我在 Feature Store API 遇到的情況來看,只有刪除 Feature Group 或 record 的選項。 我試圖在文檔中搜索功能刪除/編輯方法,但沒有成功。 我看到的當前解決方案是刪除功能組並使用 ...