AWS Lambda：調用 GetObject 操作時發生錯誤 (NoSuchKey)：指定的鍵不存在

Question

我想從 S3 (.csv) 數據中獲取數據並將其放入 DynamoDB。 我的意圖是通過 AWS Lambda 將數據直接放入 DynamoDB，每當 S3 收到任何文件時，它應該調用 Lambda 並將數據放入 DynamoDB。 我創建了一個 S3 存儲桶並創建了一個調用 Lambda 的觸發器，如下圖所示。

我也很困惑在子目錄的前綴中寫什么：“AgentMegrics/”或“connect/oblab2/Metrics/AgentMetrics/” 我所有的 CSV 文件都是在 AgentMetrics 中生成的，它是 Metrics 的子目錄，是 oblab2 的子目錄connecting 的子目錄是我的存儲桶的子目錄（new-bucket-for-metrics）。

Lambda Function

import json 
import boto3 

s3_client = boto3.client("s3") 
dynamodb = boto3.resource("dynamodb")
student_table = dynamodb.Table('AgentMetrics')
 
def lambda_handler(event, context):
    source_bucket_name = event['Records'][0]['s3']['bucket']['name']
    file_name = event['Records'][0]['s3']['object']['key']
    
    file_object = s3_client.get_object(Bucket=source_bucket_name,Key=file_name)
    print("file_object :",file_object)
    
    file_content = file_object['Body'].read().decode("utf-8")
    print("file_content :",file_content)
    
    students = file_content.split("\n")
    print("students :",students)
    
    for student in students:
        data = student.split(",")
        try:
            student_table.put_item(
            Item = {
                "Agent" : data[0],
                "StartInterval" : data[1],
                "EndInterval" : data[2],
                "Agent idle time" : data[3],
                "Agent on contact time" : data[4],
                "Nonproductive time" : data[5],
                "Online time" : data[6],
                "Lunch Break time" : data[7],
                "Service level 120 seconds" : data[8],
                "After contact work time" : data[9],
                "Contacts handled" : data[10],
                "Contacts queued" : data[11]
           } )
        except Exception as e:
            print("File Completed")


   

我得到的錯誤

    {
  "errorMessage": "An error occurred (NoSuchKey) when calling the GetObject operation: The specified key does not exist.",
  "errorType": "NoSuchKey",
  "requestId": "5047dd05-4d17-4e8a-8cb8-cc32002f8e9b",
  "stackTrace": [
    "  File \"/var/task/lambda_function.py\", line 12, in lambda_handler\n    file_object = s3_client.get_object(Bucket=source_bucket_name,Key=file_name)\n",
    "  File \"/var/runtime/botocore/client.py\", line 386, in _api_call\n    return self._make_api_call(operation_name, kwargs)\n",
    "  File \"/var/runtime/botocore/client.py\", line 705, in _make_api_call\n    raise error_class(parsed_response, operation_name)\n"
  ]
}

Lambda 測試活動

{
  "Records": [
    {
      "eventVersion": "2.0",
      "eventSource": "aws:s3",
      "awsRegion": "us-east-1",
      "eventTime": "1970-01-01T00:00:00.000Z",
      "eventName": "ObjectCreated:Put",
      "userIdentity": {
        "principalId": "EXAMPLE"
      },
      "requestParameters": {
        "sourceIPAddress": "127.0.0.1"
      },
      "responseElements": {
        "x-amz-request-id": "EXAMPLE123456789",
        "x-amz-id-2": "EXAMPLE123/5678abcdefghijklambdaisawesome/mnopqrstuvwxyzABCDEFGH"
      },
      "s3": {
        "s3SchemaVersion": "1.0",
        "configurationId": "testConfigRule",
        "bucket": {
          "name": "new-bucket-for-metrics",
          "ownerIdentity": {
            "principalId": "EXAMPLE"
          },
          "arn": "arn:aws:s3:::new-bucket-for-metrics"
        },
        "object": {
          "key": "AgentMetrics-2022-02-23T13:30:00Z.csv",
          "size": 1024,
          "eTag": "0123456789abcdef0123456789abcdef",
          "sequencer": "0A1B2C3D4E5F678901"
        }
      }
    }
  ]
}

我不知道我到底哪里做錯了，我很沮喪，因為我已經發布了大約三到四次這個問題。 我沒有得到任何有用的回復。 如果有人在這里幫助我，我將不勝感激。 提前致謝。

Answer 1

從根本上說，S3 中的密鑰應該指的是 object 的整個“文件夾”結構，而不僅僅是文件名。 所以假設你已經分享了全部信息，你的測試密鑰應該是：

連接/oblab2/Metrics/AgentMetrics/AgentMetrics-2022-02-23T13:30:00Z.csv

當然，您需要將一個角色附加到 Lambda，該角色對該特定位置具有“GetObject”權限。

注意：我將文件夾放在引號中是因為 S3 中實際上沒有文件夾，這只是它們在控制台中的表示方式。 我認為這些對象只是具有非常長的名稱，並且允許使用正斜杠進行分組。 基於此，您在 S3 通知中的前綴可以是“connect/oblab2/Metrics/AgentMetrics/”，假設您只希望將文件放在其下一級。