云数据库

  • 前言
  • 传统数据库的不足
  • 云原生数据库的优点
    • 1.动态可扩展性
    • 2.高可用性
    • 3.较低的建设成本
    • 4.轻松部署
    • 5.高可靠性
  • 云原生数据库容器化
    • 什么是容器化?
    • 为什么需要使用容器?
    • 数据库适合容器化吗?
      • 1.数据安全性
      • 2.性能问题
      • 3.资源隔离
  • 亚马逊云原生数据库
    • 数据库服务
      • Relational
      • Key-value
      • In-memory
      • Document
      • Wide column
      • Graph
      • Time series
      • Ledger
    • 产品优势
      • 1.专门构建
      • 2.规模性能
      • 3.完全托管
      • 4.安全且高度可用
  • 总结
  • 学习资料

前言

在数据库诞生之前,数据的存储和管理主要是依靠表格、卡片等方式进行,效率非常低,耗费时间也很容易出错。随着计算机相关技术的发展,数据管理技术也迅速发展。传统的文件系统难以应对数据增长的挑战,也无法满足多用户共享数据和快速检索数据的需求。在这样的发展背景下,数据库应运而生。数据库技术产生于20世纪60年代末,它的诞生和发展给计算机信息管理带来了一场巨大的革命,在不到半个世纪的时间里,形成了坚实的理论基础、成熟的商业产品和广泛的应用领域。
数据库技术是信息系统的核心和基础,是计算机科学的重要分支。它的出现极大地促进了计算机应用向各行各业的渗透。因此,数据库是作为一名程序员必须掌握的一门技术。我在学习的过程中一直使用的是亚马逊云数据库,亚马逊云科技提供了100余种产品免费套餐。其中,计算资源Amazon EC2首年12个月免费,750小时/月;存储资源 Amazon S3 首年12个月免费,5GB标准存储容量;数据库资源 Amazon RDS 首年12个月免费,750小时;Amazon Dynamo DB 25GB存储容量 永久免费。
福利在这里

传统数据库的不足

数据库管理系统的主要目的就是提供一种可以方便、高效地存取数据库信息的途径。设计数据库系统的目的是为了管理大量信息。对数据的管理既涉及信息存储结构的定义,又涉及信息操作机制的提供。通俗的讲数据库是按照某种数据模型组织起来并存放二级存储器中的数据集合。传统数据库具有非常完备的关系理论基础,高效地查询优化机制。 此外数据库系统还必须提供所存储信息的安全性保证,即使在系统崩溃或有人企图越权访问时也应保障信息的安全性。如果数据将被多用户共享,那么系统还必须设法避免可能产生的异常结果。但是传统数据库在这些方面具有一定的缺点,无法满足高并发的需求,无法满足高扩展性和高可用性的需求。
传统数据库虽然具有很多优势,但也有很多不足的地方,比如在高并发和安全等方面就存在不足。正好云原生数据库解决了这些问题,填补了传统数据库的不足,接下来就让我们学习一下云原生数据库。

云原生数据库的优点

云数据库是适合云计算环境应用要求的、弹性的多用户分布式数据库平台。它是一个面向云计算的数据库资源管理平台,旨在通过云计算的方式整合现有的大量位于互联网后台的数据库资源,为云计算应用的基础结构级别的数据库资源访问、发现、整合等多方面问题提供通用的解决方案。
传统的关系型数据库管理系统在锁机制、日志机制、缓冲区管理等方面一定程序上制约了系统性能。云数据库具有很大的优势,云数据库实现了可扩展性、高性能,并具备传统的数据库优良的特点。
其主要特性体现在以下方面:

1.动态可扩展性

理论上,数据库云平台具有无限可扩展性,可以满足不断增加的数据存储需求。在面对不断变化的条件时,数据库云平台可以表现出很好的弹性。

2.高可用性

数据库云平台不存在单点失效问题,如果一个结点失效了,剩余的结点就会接管未完成的事务。而且在数据库云平台中,数据通常是复制的,在地理上也是分布的,诸如Amazon大型云计算供应商具有分布在世界范围内的数据中心,通过在不同地理区间内进行数据复制可以提供高水平的容错能力。例如,Amazon SimpleDB会在不同的区间内进行数据复制,因此,即使整个区域内的云设施发生失效,也不影响数据的继续使用。

3.较低的建设成本

数据库云平台通常采用多租户的形式,其共享资源的形式对于用户而言可以有效节省开销;可以采用按需付费的方式,使用云计算环境中的各种软、硬件资源有效避免资源浪费。同时可以为企业提供相对经济的应用软件服务。云数据库的资费远远比自建数据库所需的成本要低很多,企业可按照自己的需求选择不同套餐,一般情况下只需要很低的价格即可得到一套专业的数据库支持服务,性价比超高。

4.轻松部署

企业可以在云数据库控制台轻松的完成数据库申请和创建,几分钟内即可准备就绪且投入使用。企业通过云数据库提供的功能完善的控制台,对所有实例进行统一管理,部署简单使用十分方便。

5.高可靠性

云数据库拥有完善的数据自动备份机制,高可靠性让您可以放心将数据放在云端,无需担心数据丢失。云数据库能够实现云端完全托管各类管理任务,比如硬件扩容、补丁升级、备份恢复等等。同样的,像亚马逊云科技能够快速帮助客户在数据安全上做大幅的提升,在高扩张性和效能提升的同时,也可以满足监控、合规的要求。以Amazon Aurora的服务为例,亚马逊可以针对静态的档案、传输中的档案、集群的副本、快照、备份进行加密,也可以在网络层的安全性上,进行VPC网络层级的隔离。

云原生数据库容器化

“你不是不够好,你只是过时了”,这句话用在互联网行业特别合适,每隔一段时间就会有新的技术出现,技术发展非常迅速。随着时代的发展,传统的数据库不再满足人们的需求,所以应运而生产生了云数据库。云数据库也不是一上来就是完美的,它也在不断地发展不断地完善,越来越成熟的技术会慢慢出现。容器化就是云计算在发展的过程中出现的一门新技术,也是云数据库发展中的技术热点。

什么是容器化?

容器就是一个软件包,这个软件包提供应用程序的完整的运行环境,包括应用程序的代码、相关配置文件以及运行应用程序所需的依赖项等。容器化是指将软件代码和所需的所有组件打包在一起,让它们隔离在自己的“容器”中。这样,容器内的软件或应用就可以在任何环境和任何基础架构上一致地移动和运行,不受该环境或基础架构的操作系统影响。容器就像是一个气泡,把应用和周围环境隔离开。也相当于是一个功能全面、便于移植的计算环境。

为什么需要使用容器?

容器有着一个非常重要的作用就是保证代码运行环境的一致性。容器通过为应用程序打包和部署提供轻量级、不可变的基础结构来解决应用程序移动到其他环境就无法正常运行的问题,将应用程序或服务、其依赖项及其配置打包为容器映像。容器技术为开发人员和 IT 专业人员只需做出少量修改,甚至不需要进行任何修改,即可跨环境部署应用程序,使用非常方便。

数据库适合容器化吗?

虽然容器化的优点是非常突出的,很多开发者也体验到了。但是目前为止,将数据库容器化并不是很合理。主要原因为以下几点:

1.数据安全性

不要将数据存储在容器中,很重要的一点就是安全性问题。容器随时会停止、或者删除,当容器被删掉的时候容器里数据也就随之丢失。

2.性能问题

MySQL 属于关系型数据库,对IO要求较高。当一台物理机跑多个时,IO就会累加,导致IO瓶颈,大大降低 MySQL 的读写性能。数据库的性能瓶颈一般出现在IO上面,如果按 Docker 的思路,那么多个docker最终IO请求又会出现在存储上面。现在互联网的数据库多是share nothing的架构,可能这也是不考虑迁移到 Docker 的一个因素吧。

3.资源隔离

资源隔离方面,Docker 确实不如虚拟机KVM,Docker是利用Cgroup实现资源限制的,只能限制资源消耗的最大值,而不能隔绝其他程序占用自己的资源。如果其他应用过渡占用物理机资源,将会影响容器里 MySQL 的读写效率。需要的隔离级别越多,获得的资源开销就越多。相比专用环境而言,容易水平伸缩是Docker的一大优势。然而在 Docker 中水平伸缩只能用于无状态计算服务,数据库并不适用。我们没有看到任何针对数据库的隔离功能,那为什么我们应该把它放在容器中呢?
介绍了这么多云原生数据库的好处,也阐述了一些云原生相关的先进技术,光有理论知识是完全不够的,我们也需要付出实践。云原生数据库的选择,我的建议是原则亚马逊云原生数据库,亚马逊作为领先企业,在云方面具有很大的优势,接下来就让我们详细的了解和学习一下。

亚马逊云原生数据库

数据库服务

亚马逊提供齐全的专用数据库,数据库类型丰富。如下图我们看到的一共包括了八种:这些数据库服务都可以免费试用而且有详细的使用教程:详细的使用教程

Relational

第一种就是关系数据库,关系数据库应该是我们现在使用最为广泛的的数据库了,我们平时经常使用的mysql、SqlServer、oracle都是关系型数据库,关系型数据库应用广泛。主要应用领域主要是在传统应用、企业资源规划、客户关系、电子商务等等。
亚马逊产品主要有三种:

Key-value

第二种就是键值数据库,键值数据库是一种非关系数据库,它使用简单的键值方法来存储数据。键值数据库将数据存储为键值对集合,其中键作为唯一标识符。键和值都可以是从简单对象到复杂复合对象的任何内容。应用领域主要是高流量 Web 应用程序、电子商务系统、游戏应用程序,亚马逊的产品是 Amazon DynamoDB。

In-memory

第三种是内存数据库,内存数据库,顾名思义就是将数据放在内存中直接操作的数据库。相对于磁盘,内存的数据读写速度要高出几个数量级,将数据保存在内存中相比从磁盘上访问能够极大地提高应用的性能。使用案例包括缓存、会话管理、游戏排行榜、地理空间应用程序。
亚马逊产品主要有两种:

Document

第四种是文档数据库,文档数据库用于将半结构化数据存储为文档,而不是像关系数据库那样在多个表之间对数据进行规范化,每个表都有唯一的固定结构。存储在文档数据库中的文档使用嵌套键值对来提供文档的结构或架构。不过,不同类型的文档可以存储在同一文档数据库中,从而满足了处理不同格式的类似数据的要求。例如,由于每个文档都是自描述的,主题文档数据库中的示例文档中所述的在线存储的 JSON 编码文档可以存储在同一个文档数据库中。亚马逊产品是Amazon DocumentDB。

Wide column

第五种是宽列存储数据库,也称作可扩展记录存储 是一种兼具了广泛的可使用性、可拓展性、高性能和高可用性的分布式 NoSQL 数据库。主要使用案例是用于设备维护、队列管理和路线优化的大规模工业应用程序。

Graph

第六种是图数据库,图数据库是以点、边为基础存储单元,以高效存储、查询图数据为设计原理的数据管理系统。图数据库属于非关系型数据库。图数据库对数据的存储、查询以及数据结构都和关系型数据库有很大的不同。图数据结构直接存储了节点之间的依赖关系,而关系型数据库和其他类型的非关系型数据库则以非直接的方式来表示数据之间的关系。图数据库把数据间的关联作为数据的一部分进行存储,关联上可添加标签、方向以及属性,而其他数据库针对关系的查询必须在运行时进行具体化操作,这也是图数据库在关系查询上相比其他类型数据库有巨大性能优势的原因。

Time series

第七种是时间序列数据库,时间序列数据库主要用于指处理带时间标签(按照时间的顺序变化,即时间序列化)的数据,带时间标签的数据也称为时间序列数据,是新型的非关系型数据库。应用领域包括物联网 (IoT) 应用程序、开发运维、工业遥测。
亚马逊的产品是Amazon Timestream

Ledger

最后一种是分类账数据库,Amazon Quantum Ledger Database (QLDB) 是一种完全托管式分类账数据库,提供了一个透明、不可变、可以加密方式验证的事务日志。

产品优势

1.专门构建

从超过 15 个专门构建的数据库引擎中进行选择,包括关系数据库、键值数据库、文档数据库、内存中数据库、图形数据库、时间序列数据库、宽列数据库和分类账数据库。

2.规模性能

获取速度为常见替代数据库 3-5 倍的关系数据库,非关系数据库延迟甚至是微秒至亚毫秒。

3.完全托管

AWS 会持续监控您的集群以使用自我修复存储和自动扩展保证工作负载运行,使您可以专注于应用程序开发工作。

4.安全且高度可用

AWS 数据库针对关键业务型企业工作负载构建,提供了高可用性、可靠性和安全性。

总结

数据库技术是信息系统的核心和基础,是计算机科学的重要分支。传统数据库已经不能满足用户所有的需求,随着云服务的快速发展,近年来企业也在不断推动云计算等事业的发展,云数据库才是未来。相信在不久的将来,一个企业全面云化的时代即将来临。

学习资料

亚马逊云科技专为开发者们打造了多种学习平台:

  1. 入门资源中心:从0到1 轻松上手云服务,内容涵盖:成本管理,上手训练,开发资源。入门资源中心
  2. 架构中心:亚马逊云科技架构中心提供了云平台参考架构图表、经过审查的架构解决方案、Well-Architected 最佳实践、模式、图标等。架构中心
  3. 构建者库:了解亚马逊云科技如何构建和运营软件。构建者库
  4. 用于在亚马逊云科技平台上开发和管理应用程序的工具包:各种工具包

企业全面云化的时代——云数据库的未来相关推荐

  1. 云化要求下,数据库架构如何演进?

    戳蓝字"CSDN云计算"关注我们哦! 作者简介:王涛 SequoiaDB联合创始人&CTO 如今,大型企业如金融企业和银行等,在下一代的微服务架构转型要求下,需要基础软件和 ...

  2. 云化要求下,数据库架构的演进

    如今,大型企业如金融企业和银行等,在下一代的微服务架构转型要求下,需要基础软件和数据平台能够实现原生的云化,以满足微服务架构的需求. 微服务,也就是一种面向服务的,有特定边界的松散耦合的架构. 主要特 ...

  3. 云化架构下,数据库架构的演进

    如今,大型企业如金融企业和银行等,在下一代的微服务架构转型要求下,需要基础软件和数据平台能够实现原生的云化,以满足微服务架构的需求. 微服务,是一种面向服务的,有特定边界的松散耦合的架构. 主要特点包 ...

  4. Apsara Stack 技术百科 | 边缘场景智能云化,让云无处不在

    简介:在过去十年间,随着计算技术的发展和移动互联网的广泛普及,各行业对数据本地计算和智能分析的需求与日俱增,越来越多的应用场景被接入了终端设备,导致终端侧的数据陡然增长,中心节点的处理算力不堪重负. ...

  5. 从开源自治,到微服务云化,阿里云的这款产品给了一剂提升微服务幸福感的良药

    简介:微服务发展至今,因其高内聚.低耦合等特性,以及诸多开源方案带来的开放性,已成为提升架构效率的最佳实践之一.当一项技术或一个框架成为事实标准之后,我们会把更多的注意力聚焦在运维效率和应用可用性的持 ...

  6. 华为发布企业服务云化转型战略 未来5年投资5亿美金建设服务能力(2017年09月06日)

    华为发布企业服务云化转型战略 未来5年投资5亿美金建设服务能力 2017年09月06日 [中国,上海,2017年9月6日] 今日,在HUAWEI CONNECT 2017上,华为面向全球发布企业服务云 ...

  7. 企业平台云化如何迁移?迁移的基本思路是什么?

    传统建设模式已无法满足移动互联网模式下业务量弹性变化的需求,以及业务快速增长对处理能力增长的需要,造成资源浪费,维护成本高. 存在问题: 资源按峰值配置,独立不共享,服务器利用率低 大量使用小型机,或 ...

  8. 沿着“云云协同”的桥梁,奔赴全面云化的产业之海

    全球无论互联网企业还是传统行业,都需要用数据来驱动业务.要不要上云已经不再是一个问题,而是所有企业的必由之路. 中国信通院的研究显示,目前国内云原生等产业的年均增速已超过30%,全面云化的时代正在来临 ...

  9. 阿里云李飞飞:云数据库成行业事实标准,瑶池正在带领国产数据库换道超车

    "云数据库已经成为数据库行业的事实标准."3月24日,在北京召开的阿里云瑶池数据库峰会上,阿里云数据库产品事业部负责人李飞飞表示,云数据库是一个全新的赛道,在这条赛道上云厂商具备先 ...

最新文章

  1. android 代码混淆 gson,Android RecyclerView和Gson混淆问题
  2. Java中 equals和==的区别?
  3. 删除jar包中的指定文件
  4. Address already in use: JVM_Bind问题的解决
  5. VS2008创建win32动态链接库图文流程
  6. 无线网络实验之五:无线路由器防火墙设置
  7. Hyperledger Fabric教程(11)-- 链码和背书策略
  8. 全网首发:首个安卓摄像头预览加显示的项目
  9. STM8S103之独立看门狗和窗口看门狗
  10. 2021-04-27
  11. 不歧视双非的计算机院校,这30所重点院校不歧视“双非”,公平竞争录取,爱了爱了!...
  12. Tomcat 安装与配置
  13. 暑期实训项目(2)--推特爬虫数据处理
  14. Python 值班表设计
  15. excel——数据透视表教程
  16. 2014年5月26日 新国九条与股市的未来
  17. Python标准库之xml.etree.ElementTree
  18. 博科brocade SAN光纤交换机端口激活过程(新版)
  19. iOS AR 高通Vuforia —— 获取摄像头帧图片
  20. 九度OJ——1201二叉排序树

热门文章

  1. word 批量设置图片大小
  2. 电大本科计算机应用基础网考答案,中央电大本科计算机应用基础网考试题选择题及答案...
  3. 3d slicer matlab,使用3D Slicer进行颅骨去除
  4. 用Python制作恋爱日志
  5. 3、Dubbo急速入门
  6. 光纤传感器实验模块_光纤传感器位移特性实验
  7. k均值算法的优化目标和随机初始化
  8. np.cosh没有分配_JavaScript中带有示例的Math.cosh()方法
  9. [附源码]java毕业设计创意众筹网站
  10. 混合波束成形|基础:深入浅出5G,毫米波,大规模MIMO与波束赋形