量数据存储、数据规模易扩展性的要求。

关键词:

企业级用户;私有云;云存储;

Hadoop

;云计算;海量数据;

HBase

;元数据

中图分类号:

TP 391

文献标志码:

A

Establishment of enterprise private cloud storage platform based on Hadoop

SUN Fuquan, ZHANG Dawei, CHENG Xu, LIU Chao

(Department of Information Technology and Business Management, Dalian Neusoft Institute of

Information, Dalian 116023, China)

Abstract:

The quantity of document and data from enterprise-level users increases exponentially, and the existing

file storage facilities cannot meet the growth. This study proposes to establish an enterprise private cloud storage

platform

based

on

Hadoop.

Using

Linux

cluster

technology,

distributed

file

systems

and

cloud

computing

framework, a mass data storage and high-speed data processing service can be achieved. The study compares the

private cloud storage with the traditional storage model, analyzes the advantage and feasibility of private cloud

storage technology, and presents an architecture model for enterprise private cloud storage. Theoretical analysis

shows that the enterprise private cloud storage platform is suitable for critical business applications, and online

transaction processing. The platform can meet the requirements from mass data storage and data scale expansion.

Keywords:

enterprise-level

users; private cloud;

cloud storage; Hadoop;

cloud

computing;

mass

data; Hbase;

MetaData

0  引  言

目前,许多来自于电信行业、石油石化行业、

数字媒体行业、医疗行业,以及

Web2.0

、金融分析

行业的企业级用户,正面临文件和数据量的指数级

增长,现有的文件存储设施不能适应业务增长,系

统管理复杂,系统成本、运营成本不断上升,存储

设施面临着多重挑战等问题。

如邮件、

图片、

音频、

视频等非结构化数据爆炸性增长;越来越多的企业

级应用对高性能联机事务处理能力和复杂查询操

作能力的需求不断提高

[1]

;对数据访问带宽和响应

时间以及数据的并行访问业务有更高的要求;企业

现有系统的扩展能力差,难以满足企业快速变化的

业务需求。传统的

NAS

方案扩展能力有限,并且面

向企业级的

NAS

设备价格往往非常昂贵,购买以及

安装独立的

NAS

设备,将面临着巨大的经济压力和

额外的维护成本。因此,为企业提供一种经济可行

的、易于管理的存储平台,可以帮助企业使用尽可

能低的成本完成数据与计算双重密集型任务

[2]

云计算具有动态部署的功能,可以利用廉价的

服务器构建企业级存储平台,具有更加弹性、更加

安全以及更低的成本。尤其是私有云能够保护企业

核心数据的安全,相比公共云服务,私有云服务所

带来的风险会降低很多。企业针对关键业务应用、

核心数据存储以及数据的高可靠性需求上更容易

接受企业私有云的运营模式。

CNKI:21-1379/N.20111211.2148.036

2011-12-11 21:48

http://www.cnki.net/kcms/detail/21.1379.N.20111211.2148.036.html

基于hadoop构建对象存储系统_基于Hadoop企业私有云存储平台的构建相关推荐

  1. 企业私有云的建立—基于Ubuntu Enterprise Cloud(3)

    2019独角兽企业重金招聘Python工程师标准>>> 企业私有云的建立-基于Ubuntu Enterprise Cloud(3) 2011-01-14 16:40:51 标签: U ...

  2. 微软IT如何规划和构建的企业私有云基础设施

    How Microsoft IT Planned and Architected an Enterprise Private Cloud Infrastructure 微软IT如何规划和构建的企业私有 ...

  3. 构建企业私有云的最佳实践

    构建企业私有云的最佳实践 作为全球计算创新领域的领先厂商,英特尔在中国大力推进计算创新.近年来,英特尔除了在微处理器.芯片组.服务器.存储系统及软件等方面有重大的突破,也在云计算.大数据和企业移动化应 ...

  4. 低成本构建私有云存储nas

    低成本构建私有云存储nas 一.目标定位 二.硬件准备列表 三.操作流程 一.目标定位 成本.控制在2000元以下. 屌丝嘛,成本是第一位的. 没钱的屌丝也想拥有一块自己的处女地,可以随意存储自己的各 ...

  5. OpenStack构建企业私有云-环境准备

    OpenStack构建企业私有云 一. 实验环境准备: 1. 电脑BIOS里面开启CPU虚拟化支持. BIOS进入方法:开机时按F1.F2.F10或DEL,或者看开机时的提示(以F1为例)" ...

  6. 基于hadoop构建对象存储系统_Hadoop社区正式支持腾讯云对象存储COS

    8月4日消息,知名大数据开源社区Hadoop近日宣布对腾讯云对象存储COS的正式支持.后续,开发者在基于Hadoop架构进行大数据分析时,能够在不修改代码的情况下,无缝高效地使用腾讯云COS来处理海量 ...

  7. java 静态对象赋值_基于Java class对象说明、Java 静态变量声明和赋值说明(详解)...

    先看下JDK中的说明: java.lang.Object java.lang.Class Instances of the class Class represent classes and inte ...

  8. hadoop小型集群_小型Hadoop集群的Ganglia配置和一些故障排除

    hadoop小型集群 Ganglia是一个针对大型集群的开源,可扩展且分布式的监视系统. 它收集,汇总并提供数十种与计算机相关的指标(例如CPU,内存,存储,网络使用情况)的时序视图. 您可以在UC ...

  9. 基于python的可视化分析_基于Python 的数据分析与可视化平台研究

    基于 Python 的数据分析与可视化平台研究 宋永生 ; 黄蓉美 ; 王军 [期刊名称] <现代信息科技> [年 ( 卷 ), 期] 2019(003)021 [摘要] 数据分析与可视化 ...

最新文章

  1. 华为手机如何升级鸿蒙系统_能运行EMUI 11才能升级到鸿蒙2.0,只有这些手机能升级,有你的吗...
  2. Struts2 缺少包
  3. @SessionAttributes 和 @SessionAttribute的区别
  4. python开方运算符_Pytorch Tensor基本数学运算详解
  5. C链表反转(时间复杂度O(n))
  6. 测试无服务器应用程序的最佳方法
  7. 【离散数学】图的着色与对偶图
  8. java中有关类的程序设计_《Java程序设计一》 1,设计课程类及类中包含的属性和方法....
  9. STM32工作笔记0071---内存管理实验
  10. 金额转换成人民币大写
  11. 【一步步学OpenGL 20】 -《点光源》
  12. nodejs 连接数据库 并在数据库上进行增删改查操作
  13. 如何向面试官正确地提问?
  14. 笔记本光驱未连接在计算机上,笔记本电脑光驱,详细教您笔记本光驱怎么打开...
  15. 从NVIDIA官方网站上下载CUDA的方法
  16. c语言sqar是double,C语言怎么编写正弦波
  17. 微信公众号身份证OCR识别和验真|人证比对
  18. 简单两步解决UCenter忘记创始人UCenter Administrator密码
  19. jitter单位_JITTER
  20. Unexpected state导致HMaster abort

热门文章

  1. java图形用户界面实验_java图形用户界面实验教程
  2. oracle组合索引失效_一文看懂Oracle数据库的三大索引类型
  3. 第一次作业 四班15
  4. 【转载】动态载入DLL所需要的三个函数详解(LoadLibrary,GetProcAddress,FreeLibrary)...
  5. C#使用oledb操作excel文件的方法
  6. 关于.NET内存中的堆和栈
  7. 程序清单 8-8 exec函数实例,a.out是程序8-9产生的可执行程序
  8. 【#】Spring3 MVC 注解(二)---@RequestMapping
  9. sqlserver与mysql的一些不同的T-SQL语句
  10. Android中在SurfaceView上高效绘图