如何从 lambda function 异步传递 redshift 查询？
[英]How to asynchronously pass redshift query from lambda function?
问题描述
我想在 lambda function 的 redshift 中执行一组复制命令，我将大约 100 GB 的文件从 S3 复制到 redshift 中的表。 我不能为此使用 Redshift Data API（因为我现在不能为集群提供秘密 arn，并且在我的情况下获取临时凭证也不理想）。
我曾尝试使用 psycopg2 库，但一旦 lambda function 超时，执行也会停止。
有什么方法可以将查询异步传递给 redshift，当 lambda function 超时时，查询仍然在 redshift 中执行？
1 个解决方案
解决方案1
2 2020-12-03 05:16:46
抱歉，没有。 这是 ODBC / JDBC 连接的基础 - 如果连接断开，事务将中止。 几年前我去了一个小的 EC2 重复 Lambda SQL 到 Redshift，这样 Lambda 就可以在不关闭连接的情况下结束。 工作得很好，但在无服务器解决方案的中心有一个服务器不太合适。 如果您愿意，可以向右下方拨打 go。
这就是为什么 Redshift Data API 向前迈出了一大步
使用 map function 将数组中的值传递给 redshift 参数化查询
[英]Pass values in an array to redshift parameterized query using map function
如何使用 boto3 从 Lambda 调用 Redshift 存储过程？
[英]How to call a Redshift stored procedure from Lambda using boto3?
如何在不复制和截断表的情况下将数据从 S3 发送到 redshift By LAMBDA？
[英]How to send data from S3 to redshift without duplicating and truncating table By LAMBDA?
如何从javascript中的另一个lambda调用特定的lambda模块function？
[英]How to call a specific lambda module function from another lambda in javascript?
声明:本站的技术帖子网页，遵循CC BY-SA 4.0协议，如果您需要转载，请注明本站网址或者原文地址。任何问题请咨询:yoyou2525@163.com.
相关问题
有什么方法可以在 redshift 服务器上异步运行查询？
使用 map function 将数组中的值传递给 redshift 参数化查询
如何使用 boto3 从 Lambda 调用 Redshift 存储过程？
如何将参数传递给 AWS Lambda 函数
将数组中的值传递给 redshift 参数化查询
无法将此查询 function 转换为 Amazon Redshift
如何在Redshift中使用window function？
如何在不复制和截断表的情况下将数据从 S3 发送到 redshift By LAMBDA？
如何从 Lambda NodeJS 查询 DynamoDB 表？
如何从javascript中的另一个lambda调用特定的lambda模块function？
相关标签