Amazon Simple Storage Service (Amazon S3)

接下来要介绍的是如何将先前的应用程序从 EC2 搬移到更轻量的 Container 里,但在介绍 Container 之前先介绍 Amazon Simple Storage Service (Amazon S3) ,做为应用程序的储存空间。

Amazon S3 简介

Amazon S3 是 AWS 所推出的托管云储存解决方案,具有无缝扩展和提供 99.999999999% 的持久性。所谓的无缝扩展指的是当存取的流量增加时,维运人员必须要考虑如何扩展基础建设好让使用者可以正常的存取,而 Amazon S3 可以提供自动扩展的功能,不需维运人员的介入;99.999999999% 的持久性,通常我们简称为 11 个 9 的持久性,在此可能要先说明一下在使用云端服务时,常见的三个名词:

  1. 可靠性 (Reliability):一个系统(设备)在约定条件下完成既定功能的概率。衡量可靠性的指标有故障率 (Failure Rate, FR)、平均故障间隔 (Mean Time Between Failures, MTBF)、平均失效前时间(Mean Time to Failure, MTTF)、平均修复时间 (Mean Time to Recovery, MTTR)等。下图说明了何谓故障间隔以及修复时间,而在发生系统无法使用之前,有些数据的写入可能就已经损毁或失效,所以在修复时我们也需要修复这些数据,而到当机前所能修复的数据时间点,我们称之为修复点(Recovery Point, RP), AWS 就容错能力、可恢复性以及可扩展性这三个构面来提供高可靠度。


图 01. 系统可靠性评估

  1. 可用性 (Availability):在软件和硬件系统中都会使用,可用性是从可靠性推导出来的。可用性是指系统无故障运行的时间占比,计算公式:Availability = MTBF/(MTBF + MTTR)

  2. 持久性 (Durability):与可用性最大的差别是在持久性并不表示它是可用的,但是这些数据是存在的,比方说系统已经无法提供服务,这时就算是无可用姓,但是它的数据依据存在,所以持久性这部分还是有效的。这就是为何我们看到 Amazon S3 会宣称它有 99.999999999% 持久性和 99.99% 可用性。

Amazon S3 的特色如下:

  • 储存任意数量的对象 (Object),对象限制为 5TB ,可将对象视为档案。
  • 储存桶 (Bucket) 名称在 Amazon S3 的所有现有储存桶名称中必须具有唯一性,所谓的所有现有储存桶名称包含其他账号的储存桶,可将储存桶视为文件夹。
  • Amazon S3 不能用作可启动驱动器。
  • 数据以冗余方式存储。
  • 通过 AWS 管理控制台、某个软件开发工具包 (SDK) 或第三方解决方案访问 Amazon S3。
  • 对象上传或删除可以触发通知、工作流程,甚至触发脚本。
  • 可自动对传输中数据和静态数据进行加密。

Amazon S3 操作

接下来我们操作如何将 Amazon EC2 上的档案上传到 Amazon S3

步骤 1: 安装 FileZilla Client

步骤 2: 透过 FileZilla Client 连上 EC2
开启 FileZilla Client 后,选择左上角的开启站台管理员,设定如下:
站台名称: EC2
设定协议: SFTP
主机网址: Amazon EC2 的公有 IPv4 地址
登入形式: 密钥档案
使用者: ec2_user
密钥档案: ithome.ppk 的所在目录


图 02. 设定FileZilla连接 Amazon EC2

顺利连上网站后,接着切换 Apache 网页的默认目录 /var/www/html ,并下载所需要的档案 index.php


图 03. 进入远程站台的网页目录

步骤 3: 新增 S3 储存贮体
到 Amazon S3 控制台,选择左边选单中的 储存贮体,并在右边按下 建立储存贮体,可以发现在 Amazon S3是属于全局的,虽然在建立贮体时还是需要指定区域,但概念上是属于全局的,主要是因为容错机制,会让它将对象会以冗余方式储存在不同可用区及区域。


图 04. 建立 S3 储存贮体

设定 S3 储存贮体名称以及所在区域


图 05. 设定 S3 储存贮体

设定 S3 所有公有存取权,预设为封锁,但因为要提供 Auto Scaling Group 中的 EC2 存取,所以把权限打开,如要增加这一部分的安全性可以透过角色 (Role)来设定。


图 06. 设定 S3 访问权限

步骤 4: 在 S3 储存贮体中新增对象
到 Amazon S3 控制台,选择左边选单中的 储存贮体,并在右边按下刚刚新增的储存贮体,选择上传,接下来就要新增对象,就相当于我们的上传档案,需要经过四个步骤:选取档案、设定许可、设定属性、检阅,其中需注意的是_设定许可_时要将管理公开许可打开。


图 07. 打开对象的管理公开许可

步骤 5: 在 EC2 中下载文件
首先先检视档案的对象 URL,因为这是对外的存取点。


图 08. 检视档案的对象 URL

透过 Putty 连接到 EC2,并下达以下指令

# 下载物件
wget https://bucket-key.s3-regionname.amazonaws.com/object-name
#检视对象内容
more object-name


图 09. 在 EC2 中下载并检视内容

References

  • 可靠性、可用性、持久性等三个概念,http://www.brofive.org/?p=3666
  • MTTR, MTBF, or MTTF? – A Simple Guide To Failure Metrics, https://limblecmms.com/blog/mttr-mtbf-mttf-guide-to-failure-metrics/
  • 设备管理中MTBF-MTTR-MTTF三个指标的区别,https://kknews.cc/career/r3o8b6v.html
    de-to-failure-metrics/
  • 设备管理中MTBF-MTTR-MTTF三个指标的区别,https://kknews.cc/career/r3o8b6v.html

Amazon Simple Storage Service (Amazon S3) 简介相关推荐

  1. Amazon Simple Storage Service(Amazon S3)

    Amazon S3是高可扩展性.持久性和可用的分布式对象存储,它主要是为重要的任务和主要的数据存储,而且它还有一个易于使用的web服务接口.在传统的内部应用程序中,这种类型的数据一般都会保存在SAN或 ...

  2. OSS(对象存储服务)与 AWS S3(Amazon Simple Storage Service)

    1. AWS S3对象存储 Amazon Simple Storage Service (Amazon S3) 是一种面向 Internet 的存储服务.您可以通过 Amazon S3 随时在 Web ...

  3. Amazon Simple Storage Service介绍

    在这篇博文中我们讨论一下Amazon Simple Storage Service(简称S3),这是亚马逊AWS服务在2006年第一个正式对外推出的云计算服务,所以在我们博客中的服务介绍中就从它开始介 ...

  4. 用 Amazon Web Services 进行云计算,第 2 部分: 用 Amazon Simple Storage Service (S3) 在云中存储数据

    用 Amazon Web Services 进行云计算,第 2 部分: 用 Amazon Simple Storage Service (S3) 在云中存储数据 简介: 学习基本的 Amazon Si ...

  5. java queue使用_使用Java使用Amazon Simple Queue Service

    java queue使用 Amazon Simple Queue Service或SQS是Amazon Webservice堆栈提供的高度可扩展的托管消息队列. Amazon SQS可用于完全解耦系统 ...

  6. 使用Java使用Amazon Simple Queue Service

    Amazon Simple Queue Service或SQS是Amazon Webservice堆栈提供的高度可扩展的托管消息队列. Amazon SQS可用于完全解耦系统中不同组件的操作,这些组件 ...

  7. 使用Amazon Simple Queue Service(SQS) 实现简单的消息服务

    一  引言 亚马逊Amazon作为云计算的领跑者推出了很多云服务,最近因为项目的原因,需要用到SQS服务,因此简要地写下这篇随笔,一来方便以后查阅,二来方便共享一些简单的操作. SQS即可以理解为一个 ...

  8. AWS S3 (Simple Storage Service)

    EC2 instance可以通过internet和私有连接两种方式访问.建议使用endpoints(私有连接)的方式访问S3这种不处于某一个具体的vpc中的公共服务,而不是通过IGW或者NAT gat ...

  9. Amazon S3简介

    目录 文献参考: 存储桶 对象 键 区域 S3数据一致性模型 存储类别 存储桶策略 AWS Identity and Access Management 操作 创建请求 AWS 账户访问密钥 IAM ...

最新文章

  1. HTML与XML总结
  2. Collection接口的常用方法
  3. 那些开源程序中让人叹为观止的代码 - 3 保持元素纵横比
  4. HTML之表格篇——表格的嵌套
  5. linux关于禁用硬件xinput使用
  6. 得到例会听后感悟_20190507_重和远
  7. java中类型转换的造型_Java-类型转换 - 吉胖子很瘦的个人空间 - OSCHINA - 中文开源技术交流社区...
  8. mysql牵引例子_MySQL学习06(事务和索引)
  9. OpenCV与图像处理学习二——图像直方图与色彩空间
  10. 高级技巧之Lambda表达式
  11. 【2017年第1期】智慧城市多源异构大数据处理框架
  12. USACO-Section1.4 Mixing Milk (贪心算法)
  13. 【转】MyBatis缓存机制
  14. 又栽了?苹果侵犯高通三项专利需赔偿3100万美元
  15. extjs JsonStore加载数据,Combobox只显示最后一项值问题
  16. [转]请不要和陌生女人说话
  17. 数学建模(NO.9斯皮尔曼相关系数)
  18. 终于填了一个大坑:Python中如何处理《牛津高阶英汉词典》编码通不过问题(解决“UnicodeEncodeError”错误)
  19. 征集开始!2022年湖北省人工智能 大数据十大优秀应用案例征集申报时间要求及征集范围、注意事项
  20. 读万卷书,行万里路。

热门文章

  1. 数据驱动的智能运维平台
  2. [RK3288][Android6.0] Documentation/leds/leds-lp55xx.txt
  3. 高校俱乐部参会成员餐票领取安排及第二届研讨会邀请信
  4. 计算机术语多态意思,C ++中的多态性
  5. 使用Python进行名片OCR(识别姓名,职务,电话,Email邮箱)
  6. ArcGIS Server无法访问服务案例处理
  7. Python实战案例,图像识别技术OpenCV,Python实现猫脸检测
  8. 野火linux启动方式选择拨码开关,embed_linux_tutorial
  9. 解决Yusi1.0主题使用中存在的问题
  10. 在三四线小城市投资3至8万,做什么小生意好?