大数据技术方面需要哪些支持

![请添加图片描述](https://img-blog.csdnimg.cn/6d035b226de3420fbc92772cd776669b.jpeg)大数据谈得多了，很多人也厌烦。其实它并非虚无的概念，而是有着直观的作用：媒体行业。我们每天会收到很多新闻，但大部分其实是用户不感兴趣的，离真正的精准性还有很大距离。广告行业。淘宝百度都有关键词，针对关键词是现在最为精准的广告投放方式，接下来将针对用户的年龄、性别、收入层次、兴趣爱好投放广告，大数据在这方面可以有更大作为。零售业。沃尔玛、711这些行业先驱，早已将数据收集分析作为基本业务，产品销量数据、人口统计数据，甚至天气数据都被纳入分析范围，在特定时间上架合适产品。硬件层：物联网设备机遇想做到大数据首先需要有数据。数据怎么来？最基础的数据感知采集，依赖智能手机、PC、手环、VR、搜集收据的汽车自行车等硬件设备。
软银孙正义曾预测：“在未来的20年里，将会有1万亿台物联网设备出现。”随着设备的爆炸性增长，数据总量在未来20年增长将超过3000倍。HBO的新剧《西部世界》让人工智能的话题再次成为热点。对于AI来说，数据也是重要制约因素，没有数据，机器就无从学习。
很多公司期望引入人工智能，但其行业和公司数据积累并不充分，人工智能应用也是想法多于实际。在数据采集设备方面，现在的智能硬件公司尤其是智能手机公司占有先发优势。谷歌拼了命也要做手机，最大的原因在于AI需要设备载体实现。有了硬件载体，才有希望最大化的搜集数据。
除了采集数据的设备，还需要为数据采集设备提供数据接收的服务器，解决数据集中化处理问题；分步式爬虫服务器，解决互联网资源调度问题；硬盘数据库服务器，用于部署分数据库，解决高并发在线数据服务问题；Web服务器，解决大数据平台对外服务问题。软件层：数据安全大挑战随着未来连接到互联网的设备数量几十倍的增加，数据安全性将成为最大挑战。这方面的恶性事件层出不穷。例如雅虎公司泄露5亿条账户的名称、电子邮箱地址、电话号码信息；
今年2月，黑客入侵孟加拉国央行在纽约联邦储备银行的账户，并一举盗走8100万美元，成为全球有史以来最大规模网络盗窃案。这两年，亚马逊AWS、微软Azure、阿里云等云计算巨头也接连曝出故障，导致正在服务的网站中断、用户无法连接服务器。保护物联网安全性，须建立过硬的存储性能。闪存作为物联网设备里必要的组成部分，存储启动代码、设备配置、IP 和数据都依赖于它。
如果攻击者获得系统中内存设备的访问权限，设备中的内容就会面临被清除或修改的可能，从而影响系统功能，甚至会危害到用户本身。之所以说“闪存是保证物联网安全性的关键”，原因在于不同硬件层可以各有所长地发挥作用，以增强安全性和填补漏洞：块锁定：通过设置配置数据位锁定内存块；当此配置数据位状态不正确时，闪存内容将无法修改。
此外，还可以防止意外或恶意修改代码一次性可编程：永久性地锁定内存块，使其无法再进行清除或写入操作；一次性可编程普遍用于保护系统中的初始化或启动代码，在其他内存内容发生损坏的情况下，可让系统在启动后进入已知的良好恢复模式。重放保护单调计数器：这一功能为启动内存中的代码和数据存储添加增量式单调计数，用于保留独特性，还可提高启动前的安全性，使系统可抵御回滚和重放攻击。读取保护：闪存设备中的内存块可设置为禁止内存读取；可防止复制内存中存储的IP或数据。密码访问：在输入有效的64位密码前，阻止系统的读取或修改行为，以保护存储在主阵列内存块中的IP和启动代码。

大数据技术方面需要哪些支持相关推荐

大数据技术之 Flume
为什么选用Flume Python爬虫数据 Java后台日志数据服务器本地磁盘文件夹 HDFS Flume Flume最主要的作用就是,实时读取服务器本地磁盘的数据,将数据写入到HDFS. 网络端 ...
顶尖技术专家严选，15场前沿论坛思辨，2019中国大数据技术大会邀您共赴
扫码了解2019中国大数据技术大会(https://t.csdnimg.cn/IaHb)更多详情. 2019中国大数据技术大会(BDTC 2019)将于12月5日-7日在北京长城饭店举办,本届大会将聚 ...
大数据技术：让看病更加靠谱！
在早期,大部分医疗相关数据以纸质形式存在,而非电子数据存储,如正式医疗记录.费用记录.护士和医生书写的病例记录.处方药记录.X光记录.磁共振成像(MRI)记录.CT图像记录等.随着强大的数据存储.计算 ...
冷热分离和直接使用大数据库_中台有“数”：大数据技术为苏宁818保驾护航
今年818正值苏宁成立30周年之际,苏宁易购提出了"专注好服务"的全新品牌主张,在带来巨大流量的同时,也给苏宁中台系统的保障工作带来了更大的挑战.如何在818大促中,快速.高效.智 ...
Hadoop十岁！Doug Cutting成长史+他眼中大数据技术的未来
上次见到(膜拜)Hadoop之父Doug Cutting是在2年前,2014中国大数据技术大会上.今年Hadoop10岁,刚看到他的Hadoop十周年贺词,感觉时间飞逝.最近CSDN和InfoQ都在制 ...
数据蒋堂 | 大数据技术的4个E
作者:蒋步星来源:数据蒋堂本文共1100字,建议阅读8分钟. 本文将大数据特点总结成4个E,可作为选择大数据技术解决方案的参考. 大数据的4个V说法在业界已经尽人皆知,这是指的大数据本身的特征.现 ...
《Spark大数据分析：核心概念、技术及实践》大数据技术一览
本节书摘来自华章出版社<Spark大数据分析:核心概念.技术及实践>一书中的第1章,第1节,作者穆罕默德·古勒(Mohammed Guller)更多章节内容可以访问云栖社区"华章 ...
数字媒体技术和数据科学与大数据技术_?数据科学与大数据技术的就业前景和待遇怎么样？...
大数据专业是新兴的专业之一,对于未来大数据领域的人才需求也比较大,因此选择大数据专业也是选择顺应时代的发展.大数据专业是典型的跨学科专业,所学习的内容有关数学,统计和计算机三个主要领域.因此,大数据专 ...
盘点最受欢迎的十个开源大数据技术
http://my.csdn.net/my/mycsdn 大数据已然成为当今最热门的技术之一,正呈爆炸式增长.每天来自全球的新项目如雨后春笋般涌现.幸运地是,开源让越来越多的项目可以直接采用大数据技术 ...
大数据技术下分布式数据库何去何从？
转自:安华信达的文章链接地址:http://www.sohu.com/a/133784835_481676 一.大数据技术的发展大数据技术从诞生到现在,已历经了十几个年头,市场上也早已有公司或机构 ...

大数据技术方面需要哪些支持

大数据技术方面需要哪些支持相关推荐

最新文章

热门文章