AWS 在 S3 存储桶中找到最大文件大小

Question

我想找到我的 S3 存储桶中最大文件的大小和名称。

目前我有：

aws s3api list-objects --bucket bucket-name --output json --query "[max(Contents[].Size), length(Contents[])]"

这不允许我看到文件的名称。

我还有命令列出存储桶中所有文件的详细信息：

aws s3api list-object-versions --bucket bucket-name --query 'Versions[*].Size'

什么命令会给我 S3 存储桶上最大文件的名称和大小？

Answer 1

仅使用 AWS CLI，这将找到最大的文件：

aws s3api list-objects-v2 --bucket bucket-name --query "sort_by(Contents, &Size)[-1:]"

或包括非当前版本（如果适用）：

aws s3api list-object-versions --bucket bucket-name --query "sort_by(Versions[*], &Size)[-1:]"

可选调整：

• 将-1替换为-N以查找最大的 N 个文件。
• 在--query末尾包含.[Key,Size]以仅选择那些字段。

遗憾的是，我认为过滤是在客户端完成的，因为在大型存储桶上运行时会下载 28 MB。 然而，尽管速度不快，但它仍然是一个有用的 1-liner。

Answer 2

以下应返回存储桶“bucket-name”中最大文件的名称和大小。

aws s3api list-object-versions --bucket bucket-name | jq -r '.Versions[] | "\(.Key)\t \(.Size)"' | sort -k2 -r -n | head -1

上面的命令使用 jq，您可以从https://stedolan.github.io/jq/download/安装它

Answer 3

这是我所做的：

使用“>”运算符将命令的输出发送到 sizes.txt 文件。 然后搜索该文本文件中的最大大小以找到相应的文件名。

脚步：

touch sizes.txt
aws s3api list-object-versions --bucket bucket-name | jq -r '.Versions[] | "\(.Key)\t \(.Size)"' | sort -k2 -r -n > sizes.txt 
vi sizes.txt /"max_size_retrieved_from_command"