boto3连接aws的s3及注意事项

你的点赞与评论是我最大的创作动力！

文章

boto3文档：https://boto3.amazonaws.com/v1/documentation/api/latest/reference/services/index.html
boto3的连接的高级接口有几个，分别是：boto3.client()、boto3.resource()

Client级别的接口则是返回Dictionary来表示查询到的资源信息。而Resource级别的接口是对Client级别的接口进行了面向对象的封装，接口的返回值大部分都是Resource对象(如果返回值是某个Resource的信息的话),我们可以对返回的对象再进行操作（比如删除，修改等）。

boto3的连接的低级接口: boto3.session(), boto3.Session

下面我讲我经常用的boto3.resource()的用法：

import boto3
s3 = boto3.resource(service_name='s3', aws_access_key_id=aws_access_key_id, aws_secret_access_key=aws_secret_access_key, region_name='cn-north-1')

参数的意义：

• service_name：连接亚马逊服务的名称，这里就是连接aws的s3服务，默认为s3
• aws_access_key_id：连接s3服务的密钥Id
• aws_secret_access_key：连接s3服务的密钥key
• region_name：连s3服务的区域名称

注意：

• 实际生产环境region_name一定要准确填写，不然连接不上又比如：cn-north-1。

当我们连上以后想查看一下有多少个bucket，可以使用下面方法：

for bucket in s3.buckets.all():
    print(bucket.name)

当想查看某一个bucket的key结构（可以看成路径结构）的时候，使用下面的办法：

# bucket_name为桶的名称
for page in s3.Bucket(bucket_name).objects.pages():
    print(page)
    for obj in page:
        print(obj.key)

当需要下载时：

# key为上面输出的key，及为一个文件的唯一标识，path为你本地存储的路径
s3.Bucket(bucket_name).download_file(key, path)

如果你想要本地存储像key值一样的路径，可参考下面的办法：

• 可以先判断key每一级路径是否存在，不存在使用os模块创建。最后使用上面的下载方法。