[英]Ho to read AWS Athena response effectively in Python Lambda
我從 Athena 得到以下類型的響應:
{
'UpdateCount': 0,
'ResultSet': {
'Rows': [{
'Data': [{
'VarCharValue': 'cc_code'
}, {
'VarCharValue': 'inv_id'
}, {
'VarCharValue': 'sno'
}, {
'VarCharValue': 'lrt'
}, {
'VarCharValue': 'lat'
}, {
'VarCharValue': 'long'
}, {
'VarCharValue': 'add'
}]
}, {
'Data': [{
'VarCharValue': 'YYY'
}, {
'VarCharValue': '2222'
}, {
'VarCharValue': '20:0100'
}, {
'VarCharValue': '2019-12-18T02:03:32Z'
}, {
'VarCharValue': '144.9194613051093'
}, {
'VarCharValue': '-22.879158430049'
}, {
'VarCharValue': 'UK'
}]
}, {
'Data': [{
'VarCharValue': 'ZZZZ'
}, {
'VarCharValue': '3333'
}, {
'VarCharValue': '10:010030015943960'
}, {
'VarCharValue': '2020-02-27T23:34:50Z'
}, {
'VarCharValue': '45.5014953316149'
}, {
'VarCharValue': '-122.562085095768'
}, {
'VarCharValue': 'IND'
}]
}],
'ResultSetMetadata': {
'ColumnInfo': [{
'CatalogName': 'hive',
'SchemaName': '',
'TableName': '',
'Name': 'cc_code',
'Label': 'cc_code',
'Type': 'varchar',
'Precision': 2147483647,
'Scale': 0,
'Nullable': 'UNKNOWN',
'CaseSensitive': True
}, {
'CatalogName': 'hive',
'SchemaName': '',
'TableName': '',
'Name': 'inv_id',
'Label': 'inv_id',
'Type': 'varchar',
'Precision': 2147483647,
'Scale': 0,
'Nullable': 'UNKNOWN',
'CaseSensitive': True
}, {
'CatalogName': 'hive',
'SchemaName': '',
'TableName': '',
'Name': 'sno',
'Label': 'sno',
'Type': 'varchar',
'Precision': 2147483647,
'Scale': 0,
'Nullable': 'UNKNOWN',
'CaseSensitive': True
}, {
'CatalogName': 'hive',
'SchemaName': '',
'TableName': '',
'Name': 'lrt',
'Label': 'lrt',
'Type': 'varchar',
'Precision': 2147483647,
'Scale': 0,
'Nullable': 'UNKNOWN',
'CaseSensitive': True
}, {
'CatalogName': 'hive',
'SchemaName': '',
'TableName': '',
'Name': 'lat',
'Label': 'lat',
'Type': 'varchar',
'Precision': 2147483647,
'Scale': 0,
'Nullable': 'UNKNOWN',
'CaseSensitive': True
}, {
'CatalogName': 'hive',
'SchemaName': '',
'TableName': '',
'Name': 'long',
'Label': 'long',
'Type': 'varchar',
'Precision': 2147483647,
'Scale': 0,
'Nullable': 'UNKNOWN',
'CaseSensitive': True
}, {
'CatalogName': 'hive',
'SchemaName': '',
'TableName': '',
'Name': 'add',
'Label': 'add',
'Type': 'varchar',
'Precision': 2147483647,
'Scale': 0,
'Nullable': 'UNKNOWN',
'CaseSensitive': True
}]
}
},
'ResponseMetadata': {
'RequestId': '2b9dabae',
'HTTPStatusCode': 200,
'HTTPHeaders': {
'x-amzn-requestid': '2b9dabae-1',
'content-type': 'application/x-amz-json-1.1',
'content-length': '7500',
'date': 'Tue, 03 Mar 2020 08:19:45 GMT'
},
'RetryAttempts': 0
}
}
我想從這個響應中獲取一些值,並對這些屬性做一些進一步的處理。 我嘗試了以下方法,但似乎不是一種干凈的方法。
query_result['ResultSet']['Rows'][1]['Data'][1]['VarCharValue']
問題是首先“數據”來自列名,實際數據來自數據[1-依此類推]。 我不想放置 2 個 for 循環來讀取我的屬性,也不想通過提供硬編碼索引來獲取列。有沒有更好的方法來讀取 python lambda 中的 Athena 響應。
您必須在循環或循環外使用索引,但要構建您的 json,您可以使用類似的輔助方法
import json
from types import SimpleNamespace as Namespace
def json2obj(data):
return json.loads(data, object_hook=lambda d: Namespace(**d))
調用此方法,它將解析您的 json,例如
parsed_result = json2obj(query_result)
現在你可以用一個點來訪問你的值
parsed_result.UpdateCount
parsed_result.ResponseMetadata.RequestId
聲明:本站的技術帖子網頁,遵循CC BY-SA 4.0協議,如果您需要轉載,請注明本站網址或者原文地址。任何問題請咨詢:yoyou2525@163.com.