如何查找我的AWS S3存储桶或文件夹的总大小？

亚马逊是否提供了一种简单的方法来查看我的S3存储桶或文件夹正在使用多少存储空间？这是我可以计算出我的成本等。如何查找我的AWS S3存储桶或文件夹的总大小？

2015-08-24 VernonFuller

很多选项在这里：http://serverfault.com/questions/84815/how-can-i-get-the-size-of-an-amazon-s3-bucket。 – jarmod

截至2015年7月28日，您可以通过CloudWatch获取此信息。

aws cloudwatch get-metric-statistics --namespace AWS/S3 --start-time 2015-07-15T10:00:00 
--end-time 2015-07-31T01:00:00 --period 86400 --statistics Average --region us-east-1 
--metric-name BucketSizeBytes --dimensions Name=BucketName,Value=myBucketNameGoesHere 
Name=StorageType,Value=StandardStorage 


Important: You must specify both StorageType and BucketName in the dimensions argument otherwise you will get no results.

来源

2015-08-24 21:54:54 VernonFuller

这也可以在控制台中看到。注意S3存储区是区域性的，因此检查放置存储区的任何区域都很重要。 – tedder42

工作正常，但CloudWatch意味着一些延迟。我的备份存储桶花费了数小时才出现。 “1小时”窗口的可用性不会对我提供太多帮助，因为我在09h49编写了这个窗口，而我的最新可见日志从昨天07h03开始。我想使用详细的CW指标会有所帮助。 – Balmipour

返回任何内容对我来说： { “数据点”：[]， “标签”： “BucketSizeBytes” } 桶已经住了好几天。 – abrkn

作为替代方案，你可以尝试s3cmd，其中有一个杜命令类似Unix的。

来源

2015-08-25 14:03:34

我使用s3cmd du s3://BUCKET/ --human-readable查看S3中文件夹的大小。它以非常可读的形式给出了关于桶中所有对象及其大小的详细信息。

来源

2016-07-21 04:51:53 bpathak

两种方式，

使用AWS CLI

AWS S3 LS --summarize --human可读--recursive S3：//桶/文件夹/

如果我们最后省略“/”，它将获得以文件夹名称开头的所有文件夹并给出所有文件夹的总大小。

AWS S3 LS --summarize --human可读--recursive S3：//桶/文件夹

使用boto3 API

import boto3 

def get_folder_size(bucket, prefix): 
    total_size = 0 
    for obj in boto3.resource('s3').Bucket(bucket).objects.filter(Prefix=prefix): 
     total_size += obj.size 
    return total_size

来源

2016-12-20 23:16:13 Dipankar

仅适用于小桶，因为它为每个单个对象请求元数据。 +1在这种情况下 – geekQ

不起作用，列出所有文件及其各自的大小，无论结尾是否有斜杠。 – Eduardo