博客
关于我
python调用aws api操作s3
阅读量:603 次
发布时间:2019-03-12

本文共 1729 字,大约阅读时间需要 5 分钟。

配置AWS环境并进行S3上传下载操作

创建配置文件夹

mkdir ~/.aws

生成密钥文件

请在用户的主目录下创建配置文件

vim ~/.aws/config

[default] 提供的输出格式为JSON

region = ap-northeast-2

默认区域设置

创建密钥文件

请在配置文件夹中创建或编辑密钥文件

vim ~/.aws/credentials

[default]

aws_access_key_id = AWS密钥ID

aws_secret_access_key = AWS秘密密钥

编写上传脚本

vim upload.py

以下是示例Python脚本

#!/usr/bin/pythonimport loggingimport boto3from botocore.exceptions import ClientErrordef upload_file(file_name, bucket, object_name=None):    """上传文件到S3桶    参数:        file_name: 需要上传的文件        bucket: 上传的S3桶名        object_name: S3对象名,默认与file_name相同    返回值:        True/False    """    if object_name is None:        object_name = file_name    s3_client = boto3.client('s3')    try:        response = s3_client.upload_file(file_name, bucket, object_name)    except ClientError as e:        logging.error(e)        return False    return Truedef main():    # 替换为实际值    bucket_name = 'test-bucket'    file_name = 'testfile'    object_name = 'testfile'        # 设置日志    logging.basicConfig(        level=logging.DEBUG,        format='%(levelname)s: %(asctime)s: %(message)s'    )        # 上传文件    response = upload_file(file_name, bucket_name, object_name)    if response:        logging.info('文件已上传')if __name__ == '__main__':    main()

下载操作示例

请根据实际需求编写下载脚本

vim download.py

#!/usr/bin/pythonimport boto3# 替换为实际值BUCKET_NAME = 'test-bucket'KEY = 'testfile'download_path = 'testfile's3 = boto3.resource('s3')try:    s3.Bucket(BUCKET_NAME).download_file(KEY, download_path)except botocore.exceptions.ClientError as e:    if e.response['Error']['Code'] == "404":        print("对象不存在.")    else:        raise

使用AWS CLI进行批量操作

# 上传示例aws s3 cp ./testfile s3://testbucket/testfile

# 下载示例aws s3 cp s3://testbucket/testfile ./

更多Python操作示例

请根据实际需求扩展脚本功能

转载地址:http://qabxz.baihongyu.com/

你可能感兴趣的文章
Oracle 常用的V$视图脚本(二)
查看>>
Oracle 并行原理与示例总结
查看>>
oracle 并集 时间_Oracle集合运算符 交集 并集 差集
查看>>
Oracle 序列sequence 开始于某个值(10)执行完nextval 发现查出的值比10还小的解释
查看>>
ORACLE 异常错误处理
查看>>
oracle 执行一条查询语句,把数据加载到页面或者前台发生的事情
查看>>
oracle 批量生成建同义词语句和付权语句
查看>>
oracle 抓包工具,shell 安装oracle和pfring(抓包) 及自动环境配置
查看>>
Oracle 拆分以逗号分隔的字符串为多行数据
查看>>
Oracle 排序中使用nulls first 或者nulls last 语法
查看>>
oracle 插入date日期类型的数据、插入从表中查出的数据,使用表中的默认数据
查看>>
Oracle 操作笔记
查看>>
oracle 数据库 安装 和优化
查看>>
oracle 数据库dg搭建规范1
查看>>
Oracle 数据库常用SQL语句(1)
查看>>
Oracle 数据库特殊查询总结
查看>>
Oracle 数据类型
查看>>
Oracle 数据自动备份 通过EXP备份
查看>>
oracle 数据迁移 怎么保证 和原表的数据顺序一致_一个比传统数据库快 1001000 倍的数据库,来看一看?...
查看>>
oracle 时间函数
查看>>