cost 72 ms
我可以制作一个触发亚马逊预测的 REST API 吗?

我正在为大学的一门课程制作一个系统,该系统使用 Amazon Forecast 来预测房屋中的能源消耗(在更精简的实验室中)。 我想知道是否有一种方法可以在 API 网关中创建 REST API 网关,触发 Amazon Forecast 功能,例如 createdatasetgroup,并在完成 ...

2022-09-27 19:34:39 0 12
递归地将 s3 对象从一个 s3 前缀复制到 airflow 中的另一个

我正在尝试使用以下格式将每小时收到的文件复制到传入的存储桶中 我想通过针对特定源系统的单个 airflow 任务将对象复制到目标文件夹中。 我试过了 - 上面的问题是,我无法对输入 source_bucket 使用wildcards 。 它需要是 s3 object 的特定完整前缀。 我还尝试使用S ...

2022-09-27 15:17:47 0 5
在某些部分后,s3直接上传多部分失败

我正在尝试使用直接分段上传,从浏览器到 S3 存储桶。 我在上述存储桶上启用了 CORS。 问题:启动分段上传后,部分部分上传正常,但其中一个部分会随机失败。 我附上下面的屏幕截图以供参考。 PS 部分大小为 8 MB 并且有 6 个并行上传我尝试使用 4 的队列大小和 5MB 的块大小。 到目前 ...

2022-09-27 15:12:30 0 8
将 GlobStatus 用于 s3 存储桶时出现 URISyntaxException

我正在使用 globStatus 使用“*”通配符从 s3 存储桶中获取所有文件和目录,并且存储桶中存在的目录之一具有特殊字符(目录名称为env: ) globStatus 由于此目录而失败,并出现以下错误。 是否有另一种方法可以使用通配符并从存储桶中获取所有文件和目录。 ...

2022-09-27 15:00:06 0 4
将html表格数据存入s3桶

有没有办法使用 Javascript 在 S3 存储桶中存储来自 HTML forms 的输入字段和图像标签? 如果是这样,请提供博客文章或解决方案链接。 ...

2022-09-27 14:55:29 0 11
扫描表并在 AWS 上为 10M 用户运行更新脚本

我正在使用包含超过 1000 万用户的AWS Dynamodb数据库,我们在处理某些事件时出错,并且我们确实以错误的方式保存了一些记录。 我创建了一个脚本,通过 250 个批量扫描表来执行更新作业,我在本地运行它可以工作,并且需要 4 天才能完成孔数据库,我遇到了AWS session 的一些问题, ...

2022-09-27 14:44:43 2 24
AWS S3 随机解析 ip 在 443 上没有响应

自 1 周以来,我在区域 us-west-2 上使用来自 aws-sdk (v2 nodejs) 的 ETIMEOUT 进行了片状测试。 它与 S3 API 一起使用,它解析了没有打开端口 443 的 ip,似乎表现得像一个丢弃规则。 例如: 连接 ETIMEDOUT 3.5.80.126:443 ...

2022-09-27 13:47:41 0 12
使用 URL 链接从 S3 存储桶打开 pdf 文件

我想知道是否有人可以提供帮助。 我目前正在开展一个项目,我们在 S3 存储桶中加载了 pdf 文档。 我想做的是自动打开每个 pdf 的链接,但是每个文档的链接是: s3://squad-dataops-analysis-restricted-cdp-us-east-1/FAA_CDs/data/ ...

2022-09-27 13:39:11 1 10
AWS Glue:向 CSV 添加属性区分数据集

我需要从他们各自的 AWS S3 存储桶中提取两家公司的数据,map 他们在 Glue 中的列,并将它们导出到 Microsoft SQL 数据库中的特定模式。 该模式是有一个表,公司的数据通过其每个站点的属性进行区分(每个公司都有多个站点)。 我对 AWS 和 SQL 完全陌生,有人介意向我解释如 ...

2022-09-27 12:25:08 1 9
下载文件:从 vue/aws lambda 重定向到 aws s3 存储桶

我有一个使用 amazon lambda 部署的 vue JS 应用程序。 作为解决方案的一部分,我有一些非常大的文件存储在 S3 存储桶中。 我当前的 JS/axios 文件如下所示:function downloadFile(file_id) { return axios.get ...

2022-09-27 11:15:18 0 9
AWS S3 允许读取除特定存储桶之外的所有对象

How can I give all s3 bucket ( public & private ) with deny of some target bucket no access 本质上,我想授予对除 select 编号之外的所有 S3 存储桶的访问权限(不想授予对存储桶 1 和子文件夹 ...

2022-09-27 09:49:59 1 20
从 s3 解压缩 tar.bz2 并将文件从 Pyhon 移回 s3

假设我有一个bzip2压缩的tar存档文件x.tar.bz2存储在s3中。 我想将其解压缩并放回s3 。 这可以通过以下方式实现: 在上述解决方案中,我将文件内容两次保存到我的本地磁盘中。 我有以下问题(预计将使用 Python 完成解决方案): 是否可以(使用tarfile模块)直接从 s3 加 ...

2022-09-27 09:28:01 1 11
通过 Athena 在 S3 查询多个 csv 文件

我以 csv 格式将我的 SQL DB 导出到 S3 中。 每个表都导出到单独的 csv 文件中并保存在 Amazon S3 中。 现在,我可以向可以连接多个表(S3 中的多个 csv 文件)的 S3 存储桶发送任何查询并获得结果集吗? 我怎样才能做到这一点并保存在单独的 csv 文件中? ...

2022-09-27 08:48:56 1 10
如何确定是否在 aws s3 中删除了所有对象?

我在表上创建的存储桶中编写了一个代码,然后在删除该表后,我想检查所有对象是否都被删除。 已实现此 function 以检查存储桶是否为空。 我观察到的是,即使我删除了表数据,我的 objCount 也是一样的。 有没有办法可以检查所有对象是否已删除或删除了多少? 想要实现一个条件,即在此存储桶中, ...

2022-09-27 08:25:30 0 14

 
粤ICP备18138465号  © 2020-2022 STACKOOM.COM