文件服务器存储解决方案探索
1 定义
文件服务器(file servers)是一种器件，它的功能就是向服务器提供文件。
它加强了存储器的功能，简化了网络数据的管理。
它一则改善了系统的性能，提高了数据的可用性，二则减少了管理的复杂程度，降低了运营费用。
2 简介
在C/S模式下，文件服务器（file server）是一台对中央存储和数据文件管理负责的计算机，这样在同一网络中的其他计算机就可以访问这些文件.
文件服务器允许用户在网络上共享信息，而不用通过软盘或一些其它外部存储设备来物理地移动文件;
任何计算机都能被设置为主机，并作为文件服务器（file server）运行
最简单的形式是，文件服务器可以是一台普通的个人计算机，它处理文件要求并在网络中发送它们;
在更复杂的网络中，文件服务器也可以是一台专门的网络附加存储（NAS）设备，它也可以作为其他计算机的远程硬盘驱动器来运行，并允许网络中的人像在他们自己的硬盘中一样在服务器中存储文件.
文件服务器具有分时系统文件管理的全部功能，提供网络用户访问文件、目录的并发控制和安全保密措施的局域网（LAN）服务器.
3 常见开源服务器
3.1 EasyFS
支持缩略图，支持单选、多选，下载支持中文名，不依赖其它容器，可独立部署，使用Java语言、SpringBoot框架开发.
3.2 FastDFS
功能
文件存储、文件同步、文件访问（文件上传、文件下载）等，解决了大容量存储和负载均衡的问题.
特别适合以文件为载体的在线服务，如相册网站、视频网站等等.
主要是针对互联网中的小文件系统，没有文件索引数据库，整体性能很高
原理
3.3 HDFS
简介
优点
高可靠性。Hadoop按位存储和处理数据的能力值得人们信赖。
高扩展性。Hadoop是在可用的计算机集簇间分配数据并完成计算任务的，这些集簇可以方便地扩展到数以千计的节点中。
高效性。Hadoop能够在节点之间动态地移动数据，并保证各个节点的动态平衡，因此处理速度非常快。
高容错性。Hadoop能够自动保存数据的多个副本，并且能够自动将失败的任务重新分配。
低成本。与一体机、商用数据仓库以及QlikView、Yonghong Z-Suite等数据集市相比，hadoop是开源的，项目的软件成本因此会大大降低。
Hadoop带有用Java语言编写的框架，因此运行在 Linux生产平台上是非常理想的。Hadoop上的应用程序也可以使用其他语言编写，比如 C++。
Hadoop是目前最流行的的分布式文件系统之一，能找到的资料相当丰富。
从使用的角度说，Hadoop的使用和使用FTP有点类似
3.4 TFS
淘宝使用的文件系统，用于图片存储，在小文件存储上比较有优势，但随着写的增加，读文件的效率会降低.
总体结构
一个TFS集群由两个NameServer节点（一主一备）和多个DataServer节点组成。这些服务程序都是作为一个用户级的程序运行在普通Linux机器上的。
在TFS中，将大量的小文件(实际数据文件)合并成为一个大文件，这个大文件称为块(Block), 每个Block拥有在集群内唯一的编号(Block Id), Block Id在NameServer在创建Block的时候分配, NameServer维护block与DataServer的关系。Block中的实际数据都存储在DataServer上。而一台DataServer服务器一般会有多个独立DataServer进程存在，每个进程负责管理一个挂载点，这个挂载点一般是一个独立磁盘上的文件目录，以降低单个磁盘损坏带来的影响。
NameServer主要功能是: 管理维护Block和DataServer相关信息,包括DataServer加入，退出, 心跳信息, block和DataServer的对应关系建立，解除。正常情况下，一个块会在DataServer上存在， 主NameServer负责Block的创建，删除，复制，均衡，整理，NameServer不负责实际数据的读写，实际数据的读写由DataServer完成。
DataServer主要功能是: 负责实际数据的存储和读写。
同时为了考虑容灾，NameServer采用了HA结构，即两台机器互为热备，同时运行，一台为主，一台为备，主机绑定到对外vip，提供服务；当主机器宕机后，迅速将vip绑定至备份NameServer，将其切换为主机，对外提供服务。图中的HeartAgent就完成了此功能
文件服务器存储解决方案探索相关推荐
- nutanix文件服务器方案,Nutanix推出超融合二级存储解决方案Nutanix Mine
近日,Nutanix在美国安纳海姆.NEXT用户大会上宣布推出全新开放式解决方案Nutanix Mine,集成二级存储操作与Nutanix企业云平台,为用户在私有云环境下提供完整的主数据存储和二级存储 ...
- 我的存储解决方案理论
2019独角兽企业重金招聘Python工程师标准>>> 当今世界的存储方式随着时代的发展变得越来约多样化,从石头山壳写,到纸张上书写,再到磁带,到光碟,到软盘,机械硬盘,U盘,固态硬 ...
- Infortrend推出超大容量存储解决方案
随着数据爆炸性成长,各行各业都离不开对数字的存储.特别对于某些企业,如何存储庞大的数据是让人非常头痛的事情.Infortrend公司推出海量集存储系统,整合了存储产品的高扩展性.易管理性而设计制 ...
- 深度解析企业级存储解决方案
随着企业不断地发展壮大,如何有效的管理企业日益增长的数据信息已经是很多中小企业所不得不面临的难题了,所以升级企业数据存储能力或制定一套完善的数据存储备份方案势在必行,不可或缺.那么这里就产生了我们所说 ...
- 文件服务器存储,文件服务器存储
文件服务器存储 内容精选 换一换 当您调用API时,如果遇到"APIGW"开头的错误码,请参见API网关错误码进行处理. HPC是高性能计算(High Performance Co ...
- 食品安全溯源区块链解决方案探索
2019独角兽企业重金招聘Python工程师标准>>> 食品安全溯源区块链解决方案探索 本文节选自电子书<Netkiller Blockchain 手札> Netkill ...
- 【宇麦科技】数据呈现爆发式增长，企业需要怎样的群晖存储解决方案？
数据存储(Data Governance)是组织中涉及数据使用的一整套管理行为,它是关于如何制定和实施整个企业的业务应用和技术管理的一系列政策和过程. 企业对数据管理需求的背后,是战略政策和业务导致的 ...
- 更快更高更强——西数推出高品质存储解决方案闪迪大师品牌
2021年8月18日,上海 – 西部数据公司 (NASDAQ: WDC) 推出专为内容创作者和专业人士所打造的高品质存储解决方案 -- SanDisk Professional™ 闪迪大师品牌及其系列 ...
- 【翻译】HTML5开发——轻量级JSON存储解决方案Lawnchair.js
[翻译]HTML5开发--轻量级JSON存储解决方案Lawnchair.js 参考文章: (1)[翻译]HTML5开发--轻量级JSON存储解决方案Lawnchair.js (2)https://ww ...
- 基于webpack的前端工程化开发解决方案探索（一）：动态生成HTML
基于webpack的前端工程化开发解决方案探索(一):动态生成HTML 参考文章: (1)基于webpack的前端工程化开发解决方案探索(一):动态生成HTML (2)https://www.cnbl ...
最新文章
- jquery操作select option使用小结
- 深信服智能边缘计算平台与 OpenYurt 落地方案探索与实践
- ubuntu16.04下面的redis desktop manger的使用
- [BZOJ 1072] 排列perm
- TCP/IP模型如何分层？路由器、网卡分别属于哪一层？
- Zbrush风格化角色大神！带你感受别致性感美学！
- JBox2D学习 - 小球碰撞实例 .
- C语言遇空字符缩进,c语言代码缩进和空白
- 20190925 On Java8 第二十二章 枚举
- 20145202马超 《Java程序设计》 实验一 实验报告
- bzoj 2957 楼房重建 分块
- .Net Framework 总结
- minikube 部署
- 90后程序员的头发危机
- 第6周作业1-闰年之循环判断（网络131黄宇倩）
- ubuntu22.04安装搜狗输入法不出中文
- High Performance Visual Tracking with Siamese Region Proposal Network 论文学习
- 使用tig 做分支管理
- 如何对待新事物_以积极态度看待不断出现的新事物
- OL3实现空间查询的代码示例