如何在Azure ML中使用python從S3讀取數據

Question

import boto3
import io
import pandas as pd

# The entry point function can contain up to two input arguments:
#   Param<dataframe1>: a pandas.DataFrame
#   Param<dataframe2>: a pandas.DataFrame
def azureml_main(dataframe1 = None, dataframe2 = None):
    s3 = boto3.client('s3',
    aws_access_key_id='REMOVED',
    aws_secret_access_key='REMOVED')
    obj = s3.get_object(Bucket='bucket', Key='data.csv000')
    df = pd.read_csv(io.BytesIO(obj['Body'].read()))
    return df,

我正在嘗試使用Execute Python模塊從S3讀取數據。 我已經下載了boto3軟件包並將其轉換為zip。 然后，我上傳了該.zip並將其連接到模塊的第三個輸入選項。 當我運行此代碼時，我收到一條錯誤消息，指出未安裝botocore。 有人能直接從S3讀取到Azure ML studio嗎？ 我已經嘗試使用R腳本模塊，但該模塊也失敗了，所以現在我嘗試使用python。

Answer 1

由於boto3程序包具有依賴項 ，即使是從git復制的依賴項 ，我也不認為Azure ML Studio可以使用它。 根據他們的文檔中的注釋，切換到Azure ML Workbench會更容易，因為它可以更輕松地處理Python程序包。

如果需要使用Azure ML Studio，另一種選擇是將S3復制到Azure Blob存儲中，而ML Studio支持該存儲。

答案不多，但恐怕您遇到了Azure ML Studio的限制。