Ubuntu 配置亚马逊 aws cli 上传文件文件夹至 亚马逊 AWS S3
当使用亚马逊云服务器进行深度学习模型训练时，需要将数据集上传，相比使用 UI 界面上传，使用命令行方式具有更快的上传速率。
- 配置步骤
- 安装 aws cli 客户端： pip install awscli，安装完后输入 aws help 可以查看帮助信息。
- 添加账户：
- 登录网页版：https://console.aws.amazon.com/console/home
- 登录后右上角选择“我的安全凭证”，“创建访问密钥”，会生成访问密钥ID及访问密钥，
- Ubuntu 控制台进入路径 ~./aws，新建 config 及 credentials 文件。内容分别如下（其中 aws_access_key_id 及aws_secret_access_key 均由步骤 (2) 产生：
4. 配置完成后尝试常用命令操作。
2. 常用命令
在 Ubuntu 控制台下运行，以文件 xx.json 为例。
- 上传文件至s3: aws s3 cp /home/ww/xx.json s3://mybuckets/my-bucket/
- 上传文件夹: aws s3 cp /home/ww/test1 s3://mybuckets/my-bucket/ --recursive
- 列出当前文件: aws s3 ls s3://mybuckets/my-bucket/
- 删除文件: aws s3 rm s3://mybuckets/my-bucket/xx.json
- 删除文件夹: aws s3 rm s3://mybuckets/my-bucket//test2
Ubuntu 配置亚马逊 aws cli 上传文件文件夹至 亚马逊 AWS S3相关推荐
- aws cli 上传文件到s3命令_使用 AWS CLI 分段上传到 Amazon S3
如何使用 AWS CLI 将文件分段上传到 Amazon S3? 上次更新时间:2020 年 11 月 10 日 我想将一个大文件作为多个部分或使用分段上传复制到 Amazon Simple Stor ...
- 亚马逊s3存储： aws cli上传工具速度和各文件大小关系探究
1,背景介绍 公司最近最近统一了存储环境,由ftp文件存储全量转换为ceph存储.有业务组表示以前往ftp文件批量上传30万个文件1.3GB只需要16分钟左右.切换为ceph存储需要1个多小时,也就是 ...
- mac 下配置连接Linux服务器方法，上传下载文件操作
1.先按照文档在本地生成SSHkey 2.mac输入 sudo -i 进入超级管理员#模式下,然后 创建用户 #useradd XXXadmin #passwd XXXadmin XXXadmin用户 ...
- aws scp上传下载文件
1. 从本地拷贝文件到远程主机 [python] view plain copy scp -i 0112.pem rootkey.csv ec2-user@ec2-52-91-206-97.compu ...
- layu多个文件上传php,文件上传 · ThinkPHP6.0 · 看云
>[danger] Layui 文件上传组件官方文档 [https://www.layui.com/doc/modules/upload.html](https://www.layui.com/ ...
- Webupload+PHP上传大文件
今天来写写上传文件这件'小事' 本文把我以前编写上传文件记录一下,给以后的自己备用和吐槽 需要用到的东西 WebUpload 官网下载 PHP 开始 引入webupload.js <script ...
- linux lftp下载目录,linux中使用lftp上传下载文件
lftp是linux中一款ftp服务器相比windows中的ftp显得要复杂不少了,下面我来总结一下lftp文件上传,文件下载,及文件查找等等相关命令吧. lftp连接的几种方法,最常用的是lftp ...
- 亚马逊html怎么上传,亚马逊 帮助: 如何上传“在线试读”文件
如何上传"在线试读"文件 亚马逊的"在线试读"项目允许出版商以PDF格式提交图书的电子内容.下列常见问答描述了提交的格式标准和要求. 我需要具备什么条件才能参加 ...
- php 上传大文件涉及的配置，upload_max_filesize，post_max_size
php.ini配置文件中的默认文件上传大小为2M, 默认upload_max_filesize = 2M,即文件上传的大小为2M,如果你想上传超过8M的文件,比如20M,你必须设定upload_max ...
最新文章
- ZOJ 2723 Semi-Prime ||ZOJ 2060 Fibonacci Again 水水水！
- 上海中学生的科技活动小论文集锦
- 使用xmanager连接centos5.5
- linux系统安装nc,Lifelong learner.
- 运行startup.bat的启动过程
- pat根据中序遍历和先序遍历_[leetcode/lintcode 题解] 前序遍历和中序遍历树构造二叉树...
- nsis如何设置运行安装包传参_使用NSIS制作安装包
- 嵊州D1T1 总统先生，一路走好！
- Office 2019 正式版 下載
- php 截取字符串的方法,php截取字符串方法有哪些
- 如何恢复删除的文件？wps文件恢复，4种方法教你找回来
- WPS-Word : 页首的段落段前间距失效/不起作用/无效，段前一行无效没反应
- kodi文件管理smb服务器,KODI+NAS的常见技巧
- 百度地图/腾讯地图/世界开源地图经纬度API查询接口
- 二分以及编程过程中求中点各种写法思想解析以及完美写法
- 算法——Horner scheme
- 入股不亏！LINQ凭什么被誉为最好的技术？
- 大屏可视化低代码开发平台网址
- Jqury 初识 -jqury选择元素 、 $()下的常用方法
- java公交IC乘车卡管理系统