什么是大数据? 大数据项目的流程

文章目录

1.含义:
2.大数据有什么特点
- (1)海量化
- (2)多样化:
- (3)快速化
- (4)高价值
3.大数据能做什么？
4.大数据就业方向和职位
- 三大就业方向：
- 十大职位：
5.大数据发展前景 (简述)
6.大数据项目的流程
最后:如果有写的不对的地方欢迎给我留言!

1.含义:

字面上理解就是 大量的数据/海量的数据
深层含义是指数据集的大小已经远远超过了现有普通数据库软件和工具的处理能力的数据

2.大数据有什么特点

(1)海量化

数据量大（多）

(2)多样化:

结构化数据，半结构化数据，和非结构化数据

(3)快速化

数据的增长速度快

(4)高价值

海量数据价值高

3.大数据能做什么？

1、海量数据快速查询 (能以极快的速度从海量的数据中找出你想要的数据)

2、海量数据的存储
（数据量大，单个大文件是存储不下的,大数据能把单个大文件切割成无数的小文件）

3、海量数据的快速计算（与传统的工具对比如:mysql/Oracle/Sybase/DB2 等计算速度会更快）

4、海量数据实时计算（立刻马上就能获得你想要的数据一般来说时间会控制在5秒以内正常都是3秒左右）

5、数据挖掘（挖掘以前没有发现的有价值的数据,比如说 : 尿不湿和啤酒事件）

4.大数据就业方向和职位

三大就业方向：

(1)大数据系统研发类人才
(2)大数据应用开发类人才
(3)大数据分析类人才

十大职位：

(1)ETL研发
(2)Hadoop开发
(3)可视化（前端展现）工具开发
(4)信息架构开发
(5)数据仓库研究
(6)OLAP开发
(7)数据科学研究
(8)数据预测（数据挖掘）分析
(9)企业数据管理
(10)数据安全研究

5.大数据发展前景 (简述)

(1)随着5G时代的到来,数据量的增长会越来越快,企业对大数据人才的需求就会越来越多.
(2)大数据产业链逐渐形成,越来越多的企业参与进来,规模会越来越大.
(3)大数据的影响不仅仅体现在互联网领域，也体现在金融、教育、医疗等诸多领域,从这可以看出大数据应用的广泛。
(4)在人工智能研发领域，大数据也起到了重要的作用，尤其在机器学习、计算机视觉和自然语言处理等方面，大数据正在成为智能化社会的基础,未来的社会会越来越依赖大数据。
(5)现如今,企业对大数据领域的人才缺口比较大
总结:从就业的角度来说,学习大数据是一个不错的选择,发展前景较好.

6.大数据项目的流程

(1)数据生产
(2)数据采集
(3)数据存储
(4)需求分析
(5)数据预处理
(6)数据计算
(7)结果数据存储
(8)结果数据展现

最后:如果有写的不对的地方欢迎给我留言!