Lambda如何通过python查询雅典娜

Question

我尝试使用python编写一个Lambda function 。 在该函数中，我想查询Athena，返回结果应与常规SQL查询结果的行数相同。 我尝试使用boto3， create_named_query()和get_query_results() ，但是它不起作用。

任何人都可以提供一个例子，我将非常感谢，再次感谢您。

Answer 1

感谢您的澄清。 您有三个选择。

1. 使用第三方库针对Athena执行（使用部署程序包上载），并将结果直接读取到Lambda函数中的代码中。
2. 执行所需的SQL查询，并从Lambda函数中直接从S3中读取结果。
3. 创建两个Lambda函数。 一个开始查询，另一个从结果中读取。 每当在Athena使用的目标S3存储桶中创建新文件时，都可以触发第二个。

考虑以下（2018-06-09）：

1. Lambda最大执行持续时间为300秒。
2. 雅典娜当前的最大查询持续时间为1800秒 。

因此，除非您完全可以保证查询执行将在300秒内完成，否则3是唯一可行的选择。 另外，三个是最可扩展的选项，因为您可以为创建的每个查询输出触发一个新的处理运行。