【引言】

本文档建立在针对HP EVA的大量测试性研究基础上，所有的细节几乎均为对EVA的破译型研究，目前全球范围内尚未发现类似资料，故可能表述方式和结论并不精确，仅为参考之用。

北亚数据恢复中心(www.datahf.net)为研究HP EVA系列算法，花费了大量的人力物力，目前应为全国唯一的研究此项技术的公司，转载请注明来源。

【前因】

HP EVA4400/6400/8400因接近退役，已进入高故障区间，用户往往会认为花费几十万甚至上百万购买的eva系列应该是非常稳定的，但实际上无论多么昂贵的存储设备，使用的磁盘是相同或相似的。正如eva上销量极大的部件号为454414-001的1T FATA磁盘，其实就是臭名昭彰的希捷7200.11 系列的FC版，虽然前者正品售价仍高达近4K，后者却不足400，但两者的性能和稳定性表现几乎是相同的。这些1T FATA磁盘在经历2-3年的运行后，总会出现大批量的损坏，而且往往一旦损坏，几乎很难修复。一个我遇到的最夸张的案例，108块1T FATA的EVA6400，在半年内先后损坏50多块，这是让人惊讶的，实则也是正常的(缘于希捷这款产品的设计缺陷)。
即便是使用15000rpm或10000rpm的FC磁盘，其实盘体也等同于希捷、日立等厂商的SAS磁盘(目前的EVA系列磁盘已经全部基于SAS了，即使是FC，也是通过转换电路实现SAS到FC的转换，如671148-001)。EVA是虚拟化的存储设备，平时数据会不断的迁移，加上应用通常较为繁重，所以磁盘的负载相对是较重的，也是很容易出现故障的。EVA是依靠大量磁盘的冗余空间，以及故障后rss冗余磁盘动态迁移来实现整个存储的数据保护，但随着越来越多的磁盘掉线，这种保护会接近临界，直至崩溃。
通过eva command view下的 fieldservice执行强制激活命令，一则会导致cache dirty、数据块结构不一致导致数据出现损坏。二则修复只能建立在绕开坏道区域的基础上，如果坏道无法绕开，也是徒劳。
另有一些情况：主机无法与扩展柜相连导致数据丢失，误删除vdisk等，也需要有切实的解决方案。
HP P6000系列控制器与EVA系列内部算法完全相同，不再单独提及。

【eva系列存储结构原理概述】

EVA系列存储是一款以虚拟化存储为实现目的的HP中高端存储设备，内部的结构组成完全不同于普通的基于简单RAID的存储，EVA内部称之为VRAID。包括一些资深的HP工程师，对EVA的理解其实是有误区的(也可能是HP官方的宏观描述)

EVA会对每个物理磁盘(简称为PV)进行签名(写在每个磁盘的0扇区)，签名后即分配进不同的DISK GROUP。在disk group中，类似于aix 的卷管理，或HP LVM的卷管理一样，每个PV会按一定大小划分为若干存储单元(按AIX的说法，暂且称为PP吧)，PP的大小为2的整数次幂，且应该在2-16M之间。
每个PV中有有限数量的PP，这些PP合起来形成整个DISK GROUP的可用空间。所有的PV按5-15组成若干组RSS(HP的官方资料中讲最小的RSS磁盘数量是6，最大应不到15，但对底层的分析得知，存在5和15个PV的RSS情况)，每个RSS就是一个所谓常规RAID的冗余组，但这个冗余组不等同于常规RAID，与常规RAID相似的是，常规RAID是以磁盘为单位的RAID算法，而RSS是基于PP的RAID算法。
为提高性能，HP EVA会有倾向地轮流分配不同的RSS组，但这些RSS之间的数据存储是基于JBOD的(HP官方和很多资料上称是RAID0，或许是宏观的概念)，每个RSS组成的stripe 的成员其实是不同PV中不同位置的PP。
无论RSS中成员数量有多少个，对于VRAID5，一个stripe中的PV数总是5个。对于VRAID6，一个stripe中的PV数总是6个。例如，对于VRAID5，EVA会尽可能在N个磁盘中做C(N,5)的组合情况，以期实现IO 负载均衡。
当一个RSS中某个PV离线，控制器会从同一个RSS组中其他磁盘(同一条带中已存在的PV之外)中寻找可用的PP，在逻辑上实现每个stripe的rebuild，从而保证整个存储的安全性。
当一个RSS中损坏的磁盘数量足够少时(少于等于6个)，这个RSS的安全性就非常低了，这时候，EVA会合并此RSS到另一个RSS中，这样可用的冗余空间就是共享的了，空间就可以从另一个较安全的RSS中迁移过来。
为了保证有足够的空间提供冗余保护，在创建disk group时，EVA会提供一个Protection Level的保护级别，single表示用2个磁盘的空间做冗余 ，double表示用4个磁盘的空间做冗余。但这个冗余不同于hotspare，这个冗余空间仅会预留到每个PV的尾部，一则，多个磁盘，IO会更均匀，更快；二则，尾部的空间通常是质量较差的空间。

【EVA系列常见故障】

1、RSS中多个磁盘掉线，超过冗余保护级别。
2、加入新磁盘，进行数据迁移时，新磁盘存在物理故障(此时无法回退，也无法前进)。
3、VDISK 删除或EVA initialize。
4、突发性主机与存储无法连接。无法discover到存储。

【数据恢复解决原理】

eva系列最核心的结构部分来自于所有vdisk的运算pp表，这个pp map表会因为磁盘的不断迁移而迁移。所有的故障均可基于此map进行恢复。
当pp map不存在时，根据不同的条带之间的冗余关系，可有优化算法对所有PP进行条带性集合，从而形成若干组正确的条带数据，再基于文件系统结构、数据结构等特征，重组若干条带。

【数据恢复解决过程】

1、原始磁盘镜像，将EVA主机一端的连线拔出，直接连入主机hba卡上，就可以认到所有物理硬盘，之后通过专业手段(Linux下的dd，windows下的winhex等)进行磁盘镜像。因eva主机与扩展柜之间多是铜线连接，故而，可能需要在扩展柜上增加光纤收发模块，再通过光链路接入fc hba卡上。当然，也可以把所有硬盘拆下来后，放入其他光纤通道柜中进行镜像。镜像方案见 http://zhangyu.blog.51cto.com/197148/138974
使用EVA扩展柜进行镜像的连接图如下：
2、通过北亚frombyte recovery for hp eva程序进行vdisk重组，直接写入成镜像文件或目标物理磁盘。
3、按常规方式解释镜像文件或目标磁盘，迁移镜像或导出内部文件。

HP EVA4400/6400/8400/P6000数据恢复解决方案相关推荐

  1. 分享一个HP EVA4400/6400/8400/P6000通用的数据恢复方法

    [引言] 本文档建立在针对HP EVA的大量测试性研究基础上,所有的细节几乎均为对EVA的破译型研究,目前全球范围内尚未发现类似资料,故可能表述方式和结论并不精确,仅为参考之用. 我们公司为研究HP ...

  2. linux操作系统下载gLINUX数据恢复及RAID数据恢复解决方案(组图

    企事业单位的IT主管.CTO们工作中最最关心的问题莫过于保存在服务器.存储设备.员工的工作PC.苹果电脑以及用于移动存储的硬盘里的数据的安全了,企事业单位内部有很多核心部门以及核心领导,他们使用的数据 ...

  3. HP EVA4400简介

    EVA4400安装配置说明 前言 EVA4400是一款高性能.可扩展.可靠性的存储解决方案,可以在短时间内轻松完成安装.凭借广泛的操作系统支持,以及与Microsoft Exchange.Oracle ...

  4. EVA4400存储虚拟机+数据库数据恢复成功案例

    一.故障描述 整个EVA存储结构是由一台EVA4400控制器,三台EVA4400扩展柜和28块FC 300G硬盘构成的.由于两块磁盘掉线导致存储某些LUN不可用,某些LUN丢失.由于EVA4400是因 ...

  5. 某地法院HP EVA8400删除VDISK后数据恢复成功

    [故障描述] 某地法院一台HP EVA8400存储,2组扩展柜,物理磁盘由12个1T FATA磁盘(AG691A 454414-001)和10个300G 15K FC磁盘(AG690A 454411- ...

  6. 法院HP EVA8400删除VDISK后数据恢复

    [故障描述] 某地法院一台HP EVA8400存储,2组扩展柜,物理磁盘由12个1T FATA磁盘(AG691A 454414-001)和10个300G 15K FC磁盘(AG690A 454411- ...

  7. HP EVA8400删除VDISK后数据恢复过程分步整理

    [故障描述] 某地法院一台HP EVA8400存储,2组扩展柜,物理磁盘由12个1T FATA磁盘(AG691A 454414-001)和10个300G 15K FC磁盘(AG690A 454411- ...

  8. 南京六合某工厂 HP ProLiant BL460c G7 RAID5 数据恢复

    客户名称 南京六合某工厂 介质品牌 HP ProLiant BL460c G7 客户描述 该服务器是由5块盘组成的RAID5.客户称5块盘中,一块盘亮红灯,一块盘亮黄灯,服务器无法正常启动. 故障现象 ...

  9. 卸载/更新HP Client Security Manager失败的解决方案（解决错误1722：软件包存在问题……）

    问题:当卸载较老版本/更新较老版本的HP Client Security Manager时可能会出现下图所示的错误: 解决方案:按Win+R键打开运行窗口,输入regedit回车进入注册表编辑器,依次 ...

最新文章

  1. LeetCode: 66. Plus One
  2. char值序列是什么Java_CharSequence和java之间的确切区别
  3. 皮一皮：一直情绪不稳的原因终于找到了！
  4. OpenGL ES之GLSL常用内建函数
  5. linux系统不关机添加硬盘吗,Linux服务器不关机新增硬盘的方法
  6. TensorFlow HOWTO 1.3 逻辑回归
  7. 关于header('location:url')的一些说明,php缓冲区
  8. ComponentOne Ultimate 2012 v2 新特性
  9. FastDFS+Nginx部署详细教程
  10. 区块链 以太坊 solidity 什么时候使用storage、memory
  11. BigDecimal——大十进制-货币型-双精度-精确运算
  12. hibernate必须知道的知识
  13. R语言从入门到精通Day2之【R语言软件下载与安装】
  14. 基于php的宠物领养系统
  15. idea安装及配置Tomcat
  16. [CISCN2019 总决赛 Day2 Web1]Easyweb
  17. 幸运抽奖系统带后台源码
  18. 论文写作，word首页脚注不显示编号
  19. Kettle之数据同步
  20. 云计算进入深水区 青云QingCloud做行业云是认真的

热门文章

  1. Dazdata BI加载百度在线地图并标注
  2. 连接数据库实现图书管理系统
  3. 解决从keil上复制代码粘贴后出现乱码的问题
  4. Java并发之Semaphore源码解析
  5. 工程项目管理的主要内容都是什么？
  6. ADB logcat 过滤方法(抓取日志)
  7. oracle百分比留两位小数,oracle保留两位小数
  8. JQuery经典例子：页面可编辑表格
  9. 如何实现C++和C的混合编程？
  10. 【深度学习】卷积神经网络发展史从LeNet到AlexNet