使用 boto3 获取 dynamodb 中的分区键列表

Question

实际上，我正在使用scan并在每个项目中获取分区键，但这确实效率不高，我的 dynamodb 太大而且需要太多时间。

有没有一种方法可以只query分区键，这样我们就有了一种优化的廉价方法来获取 python 中带有 boto3 的 dynamoDB 的所有分区键？

我的确切目标是从我的 dynamoDB 的 50 个最新元素中获取信息。 我的 dynamoDB 在列form_data中有很多信息，所以首先，我想在一个廉价的调用中获得 50 个最新的creation_file_date的 ID，这样我就可以对每个元素进行优化调用。

Answer 1

扫描

正如您提到的，获取密钥列表的唯一方法是通过Scan 。 为了减少延迟，您可以使用ParallelScan ，但对于您的用例来说它仍然效率很低。

全球二级索引

我的建议是使用 GSI 为您提供 50 个最新元素的能力。 在我的示例中，我假设您的峰值写入吞吐量永远不会超过 1000 WCU，如果超过，您将需要写入分片索引属性。

创建一个索引，将 static 值作为分区键，将creation_file_date作为排序键。

基表

创建_文件_日期	客户	数据	gsi_pk
CR 19/01/2023 18:00			1个
CR 19/01/2023 19:00			1个
CR 19/01/2023 20:00			1个
CR 18/01/2023 21:00			1个

全球二级索引

gsi_pk	创建_文件_日期	客户	数据
1个	CR 18/01/2023 21:00
1个	CR 19/01/2023 18:00
1个	CR 19/01/2023 19:00
1个	CR 19/01/2023 20:00

按creation_file_date获取最后 50 个元素

aws dynamodb query \
--table-name test1 \
--index-name test-index \
--key-condition-expression "gsi_pk = :id" \
--expression-attribute-values  '{":id":{"N":"1"}' \
--scan-index-forward false \
--limit 50 \
--return-consumed-capacity TOTAL