目录
1. 本地(Ubuntu)安装AWS客户端工具
在Ubuntu中安装AWS CLI (Command Line Interface),可以按照以下步骤进行:
1.1 检查Python依赖
首先,你需要确保已经安装了 Python 和 pip,因为AWS CLI需要它们。可以在终端中使用以下命令检查你是否已经安装它们:
python --version
pip --version
如果没有安装,你可以使用下列命令进行安装:
sudo apt-get update
sudo apt-get install python3-pip
1.2. 使用pip安装AWS CLI:
pip install awscli --upgrade --user
1.3. 检查文件版本
确认AWS CLI是否正确安装和运行。在终端中输入下面的命令:
aws --version
2. 配置AWS client
如果AWS CLI正确安装,你将看到一些版本信息。之后,你需要使用AWS的访问密钥和访问密钥ID配置AWS CLI,使用如下命令进行配置:
aws configure
然后,按照提示输入你的AWS访问密钥ID,访问密钥,默认的AWS区域以及默认的输出格式。进行这些设置后,你便可以开始使用AWS CLI了。整个配置过程可能看起来如下所示:
AWS Access Key ID [None]: YOUR_ACCESS_KEY
AWS Secret Access Key [None]: YOUR_SECRET_KEY
Default region name [None]: YOUR_PREFERRED_REGION
Default output format [None]: json
3. 上传下载
3.1. 上传
# 进入目标目录
cd $your_attachment_location_path
# 将当前目录下的内容上传到目标目录(会忽略目录下的文件)
aws s3 cp ./ s3://${your_bucket_name}/${sub_path}
# 将当前目录下的内容上传到目标目录(包含目录下的文件,迭代上传)
aws s3 cp ./ s3://${your_bucket_name}/${sub_path} --recursive
# 将当前目录下的内容上传到目标目录(包含目录下的文件,迭代上传),除开special文件(目录也是一样)
aws s3 cp ./ s3://${your_bucket_name}/${sub_path} --recursive --exclude "specical/*"
3.2. 下载
# 进入目标目录
cd $your_attachment_location_path
# 下载(若要特定目录,只需要将./改成${target_download_directory})
aws s3 cp s3://${your_bucket_name}/${sub_path} ./
# 下载特定前缀(001abc...)的文件
aws s3 sync s3://${your_bucket_name}/${sub_path} ./ --exclude "*" --include "001abc*/*"
3.3. 查看目标目录的文件(文件夹)数量
# 查看目标存储桶下的文件数量
aws s3 ls s3://${your_bucket_name}/${sub_path} --recursive | wc -l
4. 参考文章
如何利用AWS CLI进行S3的上传下载 | 钢钢更新
ChatGPT