HDFS基本命令
1.创建目录
hadoop dfs -mkdir /data
hadoop dfs -mkdir -p /data/data1 创建多级目录
2.查看文件
hadoop dfs -ls /
3.上传文件
hadoop dfs -put /usr/local/data/ /data
4.下载文件 get,将hdfs文件下载到linux本地
hadoop dfs -get /data/data/students.txt 下载到当前目录
5. 复制 cp
hadoop dfs -cp /data/data/students.txt /data
6. 查看文件内容 cat , 如果数据量比较大,不能使用
hadoop dfs -cat /data/data/students.txt
7. 移动 mv, 物理层面文件没有移动,只是改变了元数据(目录结构)
hadoop dfs -mv /data/data/students.txt /
8. 删除文件或者目录 rmr 但其实并没有真正删除,只是一个mv放到了回收站,回收站会自动清理
hadoop dfs -rmr /data/student.txt
etc下的hadoop配置文件中 cat core-site.xml
手动删除回收站
Hadoop dfs -rmr /user/root/.Trash/Current
强制删除,-skipTrash 当需要删除的文件比较大的时候
hadoop dfs -rmr -skipTrash /a
9. 查看文件末尾 tail -f ; 一直等待查看
hadoop dfs -tail /data/data/students.txt
10. 查看文件的大小
hadoop dfs -du -h /data
11.hdfs中的文件都是保存datanode子节点上,在子节点上的位置
usr/local/soft/hadoop-2.7.6/tmp/dfs/data/current/BP-626788496-192.168.163.110-163187979/current/finalized/subdir0/subdir0
12.安全模式(在安全模式不能进行修改操作,可以查看)
hadoop dfsadmin -safemode get 用来查看当前hadoop安全模式的开关状态
hadoop dfsadmin -safemode enter 命令是打开安全模式
hadoop dfsadmin -safemode leave 命令是离开安全模式
最新文章
- 井间数据polarization analysis 相关概念
- Android Studio 项目代码全部消失--出现原因及解决方法
- JavaScript中判断为整数的多种方式
- 转 BHO API HOOK Wininet基于IE编程的一些资料
- 图片填充UIImageView大小不对
- 【英语】Bingo口语笔记(36) - ʌn的发音
- 【转】让Souce Insight支持多种语言的语法高亮:Python,Ruby,ARM汇编,windows脚本文件(bat/batch),PPC,SQL,TCL,Delphi等
- session和request的区别
- jquery.qrcode和jqprint的联合使用,实现html生成二维码并打印(中文也ok)
- java 抓取百度根据关键词搜索域名
- iOS 时钟动画
- android 常用方法集合
- Redmine 安装、搭建
- vue-element-admin项目install出现的问题
- Equivalent Sets HDU - 3836 2011多校I tarjan强连通分量
- WMS常用表
- LeetCode题解之 Reverse Only Letters
- WebLogic 任意文件上传 远程代码执行漏洞 (CVE-2018-2894)------->;>;>;任意文件上传检测POC
- POM.XML文档汉化
- SQL 从数据库中随机取n条数据