0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

Netapp数据恢复—Netapp存储数据恢复案例

Frombyte 来源:Frombyte 作者:Frombyte 2023-10-13 16:13 次阅读

Netapp存储数据恢复环境:
北京某公司一台netAPP存储,72块SAS硬盘划分了若干个lun。

Netapp存储故障:
工作人员误操作删除了12个lun。

Netapp存储数据恢复过程:
1、将故障存储中所有磁盘编号后取出,以只读方式做全盘镜像后按照编号还原到原存储中,后续的数据分析和数据恢复操作都基于镜像文件进行,避免对原始磁盘数据造成二次破坏。
2、基于镜像文件分析底层数据,找到盘头位置的超级块。北亚企安数据恢复工程师通过分析超级块信息获取磁盘组的起始块信息、磁盘组名称、逻辑组起始块号、raid编号等信息。
分析超级块:

wKgaomUo-bKAW0lbAAGM4LTW7To490.png

北亚企安数据恢复——Netapp数据恢复



通过分析得知每个数据块占8个扇区,数据块后附加64字节数据块描述信息。根据这些信息判断出作为校验盘的磁盘,在后续的数据恢复过程中需要踢出这些磁盘。
校验块描述信息样例:

wKgZomUo-8aAGm7UAAEHPMpjN4Q599.png

北亚企安数据恢复——Netapp数据恢复


3、依据每块磁盘8号扇区的磁盘信息以及磁盘末尾的RAID盘序表确定盘序。首先确定各个磁盘所属aggr组,然后再判断组内盘序。数据指针跳转时不考虑校验盘,只需要确定数据盘的盘序即可。
分析盘序表:

wKgZomUo-8yAdjHCAAPYVbskxDQ991.png

北亚企安数据恢复——Netapp数据恢复



Netapp的节点分布在数量众多的数据块内,在数据块内又被统一组织为节点组。每个节点组的前64字节记录一些系统数据,之后用192字节为一项,记录各个文件节点。节点根据用户级别可分为两类:系统文件节点(MBFP)和用户文件节点(MBFI),数据恢复一般只需要MBFI节点组。
服务器节点样例图:

wKgaomUo-9OABA-LAAL9VfbltAY886.png

北亚企安数据恢复——Netapp数据恢复



头部信息64字节,此头部为数据文件的节点文件块头部,大小为64字节。
根据更新序列值获取到最新节点。解析节点中节点类型、逻辑块号、文件数量、文件大小、所占块数量和数据指针。
获取节点在节点文件中的逻辑块号,从0开始计数。

4、获取目录项,根据其节点编号找到对应节点。
获取服务器内对应节点截图:

wKgaomUo-9qAM2eXAAG38XmH3cM110.png

北亚企安数据恢复——Netapp数据恢复


5、通过北亚企安自主开发的程序提取服务器数据。
a、扫描节点信息。
扫描服务器节点信息:

wKgZomUo--CACrCcAAC4SRIqvHE117.png

北亚企安数据恢复——Netapp数据恢复



节点扫描类:

wKgZomUo--aALyH4AAI8D28dE-E157.png

北亚企安数据恢复——Netapp数据恢复



节点扫描程序完整流程:

wKgZomUo--2AKOVAAAEbzDDac4g629.png

北亚企安数据恢复——Netapp数据恢复



循环扫描完毕之后将所有扫描到的MBFP、MBFI和DOC数据块分别写入到三个文件内,用于后续处理。
b、将节点信息导入到数据库。
此模块主要负责将ScanNode扫描到的MBFI和MBFP、Dir存入数据库以备后续使用。
MBFI导入数据库整体流程:

wKgaomUo-_aABJGAAALrYf9_ZeY415.png

北亚企安数据恢复——Netapp数据恢复



函数执行完毕后查看数据库,得到如下信息:
节点导入信息:

wKgZomUo-_2AWRRZAAI-0GlMeqY537.png

北亚企安数据恢复——Netapp数据恢复



Netapp在更改inode节点时不会直接覆盖而是重新分配inode进行写入。单个文件的节点node_uid是不会改变的,mbfi_usn会随着节点的变化而增大(正常情况下提取某个文件时使用usn最大的节点)。一般情况下存储划分出的单个节点会作为LUN映射到服务器使用,根据file_size可以确定这个文件的大小,按照文件大小分组后再选取usn最大值的节点,跳转到MBFI文件的offset值偏移位置,取出节点。
节点样例图示:

wKgaomUo_AOAPHs9AAJa5P2cYoI840.png

北亚企安数据恢复——Netapp数据恢复



c、提取文件。
在获取到要提取的文件的Node之后,开始提取块设备文件。
提取块设备文件:

wKgZomUo_AyAMNnCAAICLZv8aF4564.png

北亚企安数据恢复——Netapp数据恢复



初始化完毕后,开始提取文件的各级MAP,在本次提取过程中文件大小均大于1T,MAP层级为4,所以需要提取4次。第一级MAP默认只占用1个块,所以在程序内直接提取,后三级MAP在GetAllMap函数内进行提取。通过块号计算数据块位置时,由于NetApp使用JBOD组织LVM,直接用块号除以每块磁盘上的块数可得到当前块所在的磁盘序号(计算机整数除法,丢弃小数部分);再使用块号取余块数,得到数据块在此磁盘上的物理块号,物理块号乘以块大小,得到数据块偏移位置。

6、解析块设备文件系统。
故障存储块设备中5T大小的lun使用的是aix小机的jfs2文件系统。因此要解析jfs2文件系统,提取里面的数据库备份文件。
a、找到记录lvm描述信息的扇区,解析pv大小和pv序号;找到vg描述区,解析lv数和pv数;找到pv描述区,解析pp序号和pp数。
解析文件系统块信息:

wKgZomUo_BOAbP1bAAFubJgxfMM569.png

北亚企安数据恢复——Netapp数据恢复



LV类型及LV挂载信息区域:

wKgaomUo_BqAYINeAAK-oedPzpE285.png

北亚企安数据恢复——Netapp数据恢复



b、解析8个1T大小lun组成的oralce ASM文件系统,提取其中的数据库文件。
添加8个lT的lun:

wKgZomUo_CGAP8-cAAQkW2LXskE074.png

北亚企安数据恢复——Netapp数据恢复



解析asm文件系统,提取出数据库文件:

wKgaomUo_CmAeQweAAbcezr2UD0510.png

北亚企安数据恢复——Netapp数据恢复


7、对提出的数据进行检测,没有发现异常。交由用户方进行验证,经过用户方相关工作人员的共同验证,确认恢复出来的数据完整有效。本次数据恢复工作完成。

审核编辑 黄宇

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 存储
    +关注

    关注

    13

    文章

    4308

    浏览量

    85831
  • 服务器
    +关注

    关注

    12

    文章

    9142

    浏览量

    85384
  • 数据恢复
    +关注

    关注

    10

    文章

    570

    浏览量

    17443
收藏 人收藏

    评论

    相关推荐

    服务器数据恢复—EVA存储误删除VDISK的数据恢复案例

    服务器存储数据恢复环境: 某单位有一台EVA某型号存储主机+2个扩展柜,共12个FATA磁盘+10个FC磁盘,LUN数量不确定,操作系统为WINDOWS SERVER。该
    的头像 发表于 11-05 14:39 186次阅读
    服务器<b class='flag-5'>数据</b><b class='flag-5'>恢复</b>—EVA<b class='flag-5'>存储</b>误删除VDISK的<b class='flag-5'>数据</b><b class='flag-5'>恢复</b>案例

    NetApp与Google Cloud深化合作,强化分布式云存储

    智能数据基础设施领导者NetApp®宣布,其与Google Cloud的战略合作再升级。此次合作中,NetApp将统一数据存储和智能服务融入
    的头像 发表于 10-11 17:21 494次阅读

    NetApp数据恢复NetApp存储WAFL文件系统下误删除的数据恢复案例

    NetApp某型号存储,WAFL文件系统。 工作人员误操作将该NetApp存储中的重要数据删除。
    的头像 发表于 10-11 14:17 201次阅读

    NetApp数据恢复NetApp存储误删除的数据恢复案例

    某公司一台NetApp存储,该存储中有24块磁盘。 工作人员误删除了NetApp存储中一个文件夹,文件夹中有非常重要的
    的头像 发表于 08-12 13:35 269次阅读
    <b class='flag-5'>NetApp</b><b class='flag-5'>数据</b><b class='flag-5'>恢复</b>—<b class='flag-5'>NetApp</b><b class='flag-5'>存储</b>误删除的<b class='flag-5'>数据</b><b class='flag-5'>恢复</b>案例

    服务器数据恢复—LeftHand存储结构&amp;raid故障的数据恢复案例

    LeftHand存储数据恢复案例: 服务器存储数据恢复环境&故障: 该LeftHand
    的头像 发表于 07-19 10:25 330次阅读
    服务器<b class='flag-5'>数据</b><b class='flag-5'>恢复</b>—LeftHand<b class='flag-5'>存储</b>结构&amp;raid故障的<b class='flag-5'>数据</b><b class='flag-5'>恢复</b>案例

    服务器数据恢复—EqualLogic存储硬盘故障导致存储崩溃的数据恢复案例

    服务器数据恢复环境: 一台某品牌EqualLogic PS 6011型号存储,底层有一组由16块SAS硬盘组建的RAID5阵列,上层存储空间划分了4个卷,格式化为VMFS文件系统,存
    的头像 发表于 05-31 11:35 475次阅读
    服务器<b class='flag-5'>数据</b><b class='flag-5'>恢复</b>—EqualLogic<b class='flag-5'>存储</b>硬盘故障导致<b class='flag-5'>存储</b>崩溃的<b class='flag-5'>数据</b><b class='flag-5'>恢复</b>案例

    NetApp数据恢复—WAFL文件系统下误删除数据数据恢复案例

    某公司NetApp存储设备,人为误操作导致NetApp存储内部分重要数据被删除,该NetApp
    的头像 发表于 05-13 10:50 371次阅读

    Netapp数据恢复Netapp存储中卷被误删除的数据恢复案例

    NetApp存储数据恢复环境: NetApp FAS某型号存储,该
    的头像 发表于 04-18 15:52 419次阅读
    <b class='flag-5'>Netapp</b><b class='flag-5'>数据</b><b class='flag-5'>恢复</b>—<b class='flag-5'>Netapp</b><b class='flag-5'>存储</b>中卷被误删除的<b class='flag-5'>数据</b><b class='flag-5'>恢复</b>案例

    服务器数据恢复—光纤存储中raid5出现故障的数据恢复案例

    服务器数据恢复环境&故障情况: 某企业光纤存储上有一组由16块硬盘组建的raid5阵列。管理员发现该光纤存储上的卷无法挂载,经过检查发现raid5阵列中有2块硬盘离线,于是联系我们
    的头像 发表于 04-10 15:38 452次阅读

    NetApp数据恢复NetApp存储中的卷丢失的数据恢复案例

    NetApp存储数据恢复环境: 北京某公司的一台NetApp某型号存储,通过96块磁盘组建了两
    的头像 发表于 03-07 15:42 413次阅读
    <b class='flag-5'>NetApp</b><b class='flag-5'>数据</b><b class='flag-5'>恢复</b>—<b class='flag-5'>NetApp</b><b class='flag-5'>存储</b>中的卷丢失的<b class='flag-5'>数据</b><b class='flag-5'>恢复</b>案例

    NetApp数据恢复NetApp存储误操作删除lun的数据恢复案例

    NetApp数据恢复环境: NetApp某型号存储存储中有数十块SAS硬盘,该型号
    的头像 发表于 01-11 11:40 471次阅读
    【<b class='flag-5'>NetApp</b><b class='flag-5'>数据</b><b class='flag-5'>恢复</b>】<b class='flag-5'>NetApp</b><b class='flag-5'>存储</b>误操作删除lun的<b class='flag-5'>数据</b><b class='flag-5'>恢复</b>案例

    Netapp存储数据恢复案例

    某单位一台Netapp存储,该Netapp存储内共有数十块SAS硬盘。 工作人员误操作删除了Netapp
    的头像 发表于 01-04 15:26 441次阅读
    <b class='flag-5'>Netapp</b><b class='flag-5'>存储</b><b class='flag-5'>数据</b><b class='flag-5'>恢复</b>案例