hadoop误删除文件
hadoop的hdfs中被删除文件的恢复原理和回收站原理是一样的,就是在删除hdfs文件时,被删除的文件被移动到了hdfs的.Trash文件夹中,恢复时只需将该文件夹中文件拿出即可。具体操作如下:
1 设置.Trash文件夹
如果需要恢复hdfs中文件,就需要设置.Trash,hadoop的.Trash默认是关闭的。具体设置如下:
fs.trash.interval
10080
该配置项在core-site.xml中,fs.trash.interval代表删除的文件保留的时间,时间单位为分钟,默认为0代表不保存删除的文件。我们只需要设置该时间即可打开.Trash。
2 设置后删除文件会显示删除的文件被移动到了hdfs://192.168.1.100:9000/user/hadoop/.Trash/Current中,举例如下:
14/10/20 16:48:24 INFO fs.TrashPolicyDefault: Namenode trash configuration: Deletion interval = 10080 minutes, Emptier interval = 0 minutes. Moved: 'hdfs://10.207.0.217:9000/test_out/mr-2014101711
hadoop误删除文件相关推荐
- 在不开启回收站的情况下恢复Hadoop误删除文件
这个问题其实比较严重,提前说一下结论,能恢复的只有执行删除后未删除的数据,已经删除的数据无法恢复. 什么叫执行删除后未删除的数据呢,因为hadoop执行删除时是在edits文件中添加一个标记,然后慢慢 ...
- hadoop 提高hdfs删文件效率----hadoop删除文件流程解析
前言 这段时间在用hdfs,由于要处理的文件比较多,要及时产出旧文件,但是发现hdfs的blocks数一直在上涨,经分析是hdfs写入的速度较快,而block回收较慢,所以分心了一下hadoop删文件 ...
- centos误删除文件如何恢复
当意识到误删除文件后,切忌千万不要再频繁写入了,否则你的数据恢复的数量将会很少. 而我们要做的是,第一时间把服务器上的服务全部停掉,直接killall 进程名 或者 kill -9 pid . 然后把 ...
- hadoop定位文件读取
hadoop定位文件读取 需求说明: 上传文件 分块下载 查看 需求说明: 分块读取HDFS上的大文件,比如根目录下的/hadoop-2.7.2.tar.gz 上传文件 [xzc@hadoop102 ...
- 一图看懂hadoop分布式文件存储系统HDFS工作原理
一图看懂hadoop分布式文件存储系统HDFS工作原理 转载于:https://www.cnblogs.com/AlexQY/p/9856477.html
- hadoop日志文件
hadoop日志文件 @(HADOOP)[hadoop] hadoop日志文件 一master服务器上的日志 二slave服务器上的日志 三审计日志 四MR作业历史日志 hadoop存在多种日志文件, ...
- 防止linux系统文件被误删除,Linux系统防止误删除文件
1.前言 曾几何时,一条 rm -rf/useless /* 命令干掉了我们需要的文件,也干掉的整个系统, 这是是不是与哭无泪啊. 像这种使用 rm 命令误删除文件的情况,我们会注意,但是我们不能保证 ...
- 误删除文件怎么找回 数据恢复用这些方法
误删除文件是很多人都会遇到的问题,尤其是在Windows 10系统中,有时候我们不小心按了Shift+Delete或者清空了回收站,就会导致文件永久消失.那么,误删除文件怎么找回呢?本文将介绍四种数据 ...
- Linux 下固态硬盘恢复误删除文件
首发地址:学习日记 Linux 下固态硬盘恢复误删除文件 – 学习日记 上次分享了一则Linux下恢复误删除文件的视频,有朋友在视频下方询问是否机械硬盘,由此引出今天这则Linux下固态硬盘恢复误删除 ...
最新文章
- 如何洞察行业中的应用场景?(下篇)
- VTK:Rendering之Cone3
- python 百分比数据_如何使用python计算数据列相对于另一列的百分比排名
- java 遍历100以内的偶数,偶数的和,偶数的个数
- ProxyChains
- C++---vector与list之间的区别
- 《南溪的目标检测学习笔记》——neck组件的设计笔记
- 58 同城 iOS 客户端组件体积分析与统计实践
- 补码,反码,原码的范围总结
- Mac安装IntelliJ IDEA配置go语言环境
- Android水平仪实训报告,测量实训报告范文3篇
- mvc表单Form提交 --实体
- Geoda空间自相关分析—局部Moran‘I指数(运用GeoDa制作Lisa图)
- 移动警务系统建设方案
- 现代信号处理——自适应滤波器(RLS自适应滤波器)
- gwas snp 和_GWAS综述(生信文献阅读俱乐部精选)
- Android开发 UI布局
- Scheme语言基础之数据类型
- 2920集五福_2020年支付宝集五福攻略
- 互联网之子 Aaron Swarts 想要看到的世界
热门文章
- 裁员消息满天飞,我们整理了一份真实名单
- 两天连续送五国 马云援欧物资加速运抵eWTP枢纽
- 继扫楼推广后,P图病历也可发起筹款,水滴筹回应...
- vivo U3开启预约:搭载骁龙675
- 中国移动老功臣退休致辞:工作结束了 人生没结束
- 蔡崇信完成对布鲁克林篮网和巴克莱中心的全资收购
- 从淘宝CFO到接棒马云 张勇是如何在12年里成为阿里董事局主席的
- 大家可以放心了!Redmi K20将配备双频GPS
- 腾讯发布企鹅号“达人计划”清退公告 清退后当月结算将被取消
- data ajax begin,Ajax.BeginForm()知多少