大数据有两大特点,一是数据来源多,包括各种结构化数据和非结构化数据,如网络日志、视频、图片、地理位置信息等等,同时数量相对巨大,大数据中的‘大’本身就是一个相对的概念;二是数据处于“online”即在线的状态,能够随时被吸取和关联,并进行分析。

一般来讲,更多智能硬件和这能设备的加入,更多数据实时产生,于是就需要大数据技术来实现对数据信息的价值挖掘。大数据技术包括了数据采集,数据存取,基础架构,数据处理,统计分析,数据挖掘,模型预测,结果呈现等八个方面。

而以上几个方面都离不开云平台和云计算能力,比如说数据采集之后的数据存储,现在很多非核心敏感数据都可以存储在云端;数据挖掘也是需要通过云计算和机器学习才能实现。那什么才是云计算呢?

云计算——低成本部署、随需使用的计算大脑

所谓云计算,非常教科书的说法是“能通过网络访问可扩展的、灵活的、可共享的物理或虚拟资源池,并按需自助获取和管理这些资源的模式。其中资源实例包括服务器、操作系统、网络、软件、应用和存储设备等。”

从以上概念可以看出其包括软件、硬件等资源,简单说云计算有三层云平台,第一个是Iaas(InfrastructureasaService),基础设施即服务,以前这些资源都是企业固有资源,现在可以不再拥有,通过平台服务商提供,减轻部署成本;

第二个是Paas(Platformasaservice),平台即服务,开放式的API可以由合作方提供行业和内容的服务;

第三个是SaaS(Softwareasaservice),软件即服务。比如我们经常使用的手机APP等;

云计算有一个很重要的特点和优势就是资源池化,就是把Iaas,Paas,Saas层的资源(CPU、存储、网络等)放入到资源池中(云服务器),由云服务器进行集中管理。云计算里所有的服务都是通过资源池里的资源而提供的。

我们已经进入了新一轮技术驱动的时代,那如何理解大数据与云计算的关系?

在中国计算机学会大数据专家委员会副主任车品觉看来:人工智能、深度学习,这些都是二十年前就有的技术,但是二十年前没有大数据,没有可以关联的数据。所以大数据的故事从有了关联才真正开始。

那如何应用大数据?首先要了解数据的生命周期。“布点”、“收集”、“存储”,这些是前端,之后需要对数据做“识别”、“关联”、“分析”。还有一个能把整个过程包起来的,就是“实时刷新”。这就是数据的生命周期,它是一个闭环。

大数据技术并不是已经成熟的技术,是一个正在从应用中逐渐走向成熟的技术,目前的挑战多于成熟,只有沉得下心,愿意扎扎实实打好基础的政府和企业,才能从大数据技术上获益,所以,要从整体视角来观察大数据和云计算,而不能因为其中一个而偏废其他,总体来讲,大数据技术与云计算都是很有效的工具手段,有待人们去不断挖掘。

历史规律告诉我们,任何一次大型技术革命,早期人们总是高估它的影响,会有一轮一轮的泡沫;中期又会低估它的影响,觉得不过是些概念而已;当你觉得它是概念的时候,它已经开始生根发芽,开始茁壮成长。

人工智能、大数据、云计算和物联网的未来发展值得重视,均为前沿产业,多智时代专注于人工智能和大数据的入门和科谱,在此为你推荐几篇优质好文:
大数据相关职位有哪些,大数据工程师未来才是最具有潜力的
http://www.duozhishidai.com/article-15890-1.html
大数据工程师培训,需要学习的有哪些课程?
http://www.duozhishidai.com/article-15081-1.html
学习大数据去培训机构,国内哪个数据培训机构会好一些?
http://www.duozhishidai.com/article-15057-1.html


多智时代-人工智能和大数据学习入门网站|人工智能、大数据、物联网、云计算的学习交流网站

大数据技术和云计算之间,主要有什么关系?相关推荐

  1. 互联网时代,大数据技术与云计算平台结合发展、应用

    随着互联网信息技术水平的不断提高,以大数据.云计算等为代表的相关技术在各个领域和行业之中的应用越来越发挥着重要的作用.互联网信息时代的快速发展,各个行业在发展之中都会产生大量的数据.如何对数据进行存储 ...

  2. 数据科学与大数据技术专业 —— 云计算●虚拟化 课程 期末复习卷及其简答(2)

      虚拟化云计算综合复习题   复习题 2:   一.选择题(每题3分,共48分)   1.(多项选择)虚拟基础架构包括以下哪些组件 ABD ?   (A)裸机管理程序   (B)虚拟基础架构服务   ...

  3. 数据科学与大数据技术专业 —— 云计算●虚拟化 课程 期末复习卷及其简答(1)

      虚拟化云计算综合复习题   复习题 1:   一.选择题(每题3分,共48分)   1.(多项选择)虚拟化常见的类型有 ABCD .   (A)服务器虚拟化   (B)桌面虚拟化   (C)存储虚 ...

  4. 【云计算与大数据技术】云计算概论介绍

    一.什么是云计算 云计算(cloud computing)是基于互联网的相关服务的增加.使用和交付模式,通常涉及通过互联网来提供动态易扩展且经常是虚拟化的资源.云是网络.互联网的一种比喻说法,过去往往 ...

  5. 大数据技术有哪些,为什么说云计算能力是大数据的根本!

    首先我们要明白为何从前几年开始谈大数据了?这是一个基本问题,同时也包含着对当下数据现实的基本认识.一个不可否认的事实是,随着网络和信息技术的不断普及,我们产生的数据量正在呈指数级增长.大约每两年翻一番 ...

  6. 大规模分布式存储系统:原理解析与架构实战 (大数据技术丛书) - 电子书下载 -(百度网盘 高清版PDF格式)...

    大规模分布式存储系统:原理解析与架构实战 (大数据技术丛书)-杨传辉 在线阅读                   百度网盘下载(89hy) 书名:大规模分布式存储系统:原理解析与架构实战 (大数据技 ...

  7. 第二章 大数据技术概述

    大数据基本概念 数据是各种符号如字符.数字等.声音.图片动画.视频多媒体,数据也是原始事实.要保证其原始性和真实性,后期加工才有意义.信息是人们为了某种需求而对原始数据加工重组后形成的有意义.有用途的 ...

  8. 大数据技术助推数字化智慧城市管理平台的搭建

    近来几年,你必定听惯了这样子的形容,说大数据技术,云计算技术,人工智能,5G等数字基础设施,是信息内容文明的"水电煤",我们终究离不了这些. 但你是不是会好奇,在我国,哪座城市将这 ...

  9. 南京大数据技术Meetup第四次活动

    很有幸今天去参加了"南京大数据技术Meetup第四次活动",前三次由于不知道这样的活动,错过了非常可惜.以下就是我了解到的一些内容,在这里做一些记录: 1.   主要人员 a)  ...

最新文章

  1. 封装 vue 组件的过程记录
  2. 基于C++的PyTorch模型部署
  3. 22021年江苏高考成绩查询,江苏高考成绩查询系统
  4. 解读2019华为第001号文件:AI时代软件开发的第一要义是可信
  5. do{...}while(0) 的意义和用法
  6. sv编程语言_SV及UVM高级话题篇之一:SystemVerilog开源公共库(上)
  7. 工作196:注意接收数据的格式
  8. SVN文件上感叹号、加号、问号等图标的原因
  9. 算法-第四版-练习1.2.3解答
  10. 入手kindle 3
  11. 单片机驱动程序是什么,驱动文件组成。
  12. java beetl输出demo_Beetl 快速入门
  13. 图谱笔记(概念梳理)
  14. php http请求 返回数据包太大 499,http错误码原理及复现 - 499,500,502,504
  15. 陕西计算机中考考试,2018年陕西省中考考试时间及科目安排公布
  16. pdf转wordpptexceljpg图片pdf编辑器转换修改
  17. mysql查询表的列名_查看表所有列名SQL
  18. 智能手表的机遇与挑战
  19. 老男孩mysql运维dba实战21部完整版_老男孩MySQL高级专业DBA实战课程/高级运维DBA课程/MySQL视频教程 零基础全套...
  20. 百度智能运维的技术演进之路

热门文章

  1. matlab:使用四阶龙格库塔方法求解微分方程组
  2. Appium基础学习之 | Bootstrap源码分析
  3. 用计算机黑人抬棺谱子,原神黑人抬棺琴谱 乐曲谱子教学
  4. 皮带秤 算法_改进型卡尔曼滤波算法在电子皮带秤动态称重中的应用.PDF
  5. 如何学习MATLAB
  6. spring应用集成skywalking监控组件[附带log4j2集成]
  7. a标签的tagart属性
  8. cca matlab代码,CCA的matlab小实验
  9. 太原理工硬件基础题库
  10. python学习(4)zip函数