网站建设资讯

NEWS

网站建设资讯

hdfs数据误删分析与恢复-创新互联

一、相关参数:

专注于为中小企业提供成都网站建设、网站建设服务,电脑端+手机端+微信端的三站合一,更高效的管理,为中小企业凤阳免费做网站提供优质的服务。我们立足成都,凝聚了一批互联网行业人才,有力地推动了上千余家企业的稳健成长,帮助中小企业通过网站建设实现规模扩充和转变。

1、core-site.xml  文件修改以下配置项:


     fs.trash.interval
     2880
     HDFS垃圾箱设置,可以恢复误删除,配置的值为分钟数,0为禁用

2、hdfs-default.xml 文件注意以下配置项:

          
      dfs.ha.log-roll.period
      120
      EditLog 日志滚动频率,单位为秒,默认是两分钟

二、分析过程

1、找到editlog日志所在目录

查看hdfs-site.xml文件,找到fs.namenode.name.dir配置项的值,如:file:/home/hadoop-2.6.0-cdh6.5.0/dfs/name

在/home/hadoop-2.6.0-cdh6.5.0/dfs/name目录下的current文件里,就是editlog文件,如下图

hdfs数据误删分析与恢复

hdfs数据误删分析与恢复

2、使用命令查看edits_inprogress文件

 #hdfs oev -i edits_inprogress_0000000000000000023 -o edits_inprogress_0000000000000000023.xml

其中 -i 是输入文件名,-o是需要把解析的文件输出到该文件中

解析完成后,查看edits_inprogress_0000000000000000023.xml文件即可

3、打开文件分析

找到被删除的文件或文件夹,在edits_inprogress_0000000000000000023.xml文件中搜索相关项,如下所示:


    OP_RENAME_OLD
    
      15
      0
      /dat
      /user/root/.Trash/Current/dat
      1454315297010
      6832d4f9-4fa6-4dbb-89aa-ffaa26109078
      6
    
  

可以看出,HDFS中 /dat 文件是在  1454315297  时间点被移入回收站的

4、恢复文件

执行以下命令:

 
#fs -mv   /user/root/.Trash/Current/dat    /dat

进行恢复

另外有需要云服务器可以了解下创新互联scvps.cn,海内外云服务器15元起步,三天无理由+7*72小时售后在线,公司持有idc许可证,提供“云服务器、裸金属服务器、高防服务器、香港服务器、美国服务器、虚拟主机、免备案服务器”等云主机租用服务以及企业上云的综合解决方案,具有“安全稳定、简单易用、服务可用性高、性价比高”等特点与优势,专为企业上云打造定制,能够满足用户丰富、多元化的应用场景需求。


网页题目:hdfs数据误删分析与恢复-创新互联
文章起源:http://njwzjz.com/article/shcsc.html