Hadoop 的使用
2024-08-23 14:52:22
hadoop:
hadoop启动:./sbin/start-dfs.sh
hadoop关闭:./sbin/stop-dfs.sh
bin文件用于在HDFS创建数据
HDFS 中创建用户目录:
./bin/hdfs dfs -mkdir -p /user/hadoop
往input中放数据:
./bin/hdfs dfs -mkdir input
./bin/hdfs dfs -put ./etc/hadoop/*.xml input
查看input文件夹内容:
./bin/hdfs dfs -ls input
运行类子:
./bin/hadoop jar ./share/hadoop/mapreduce/hadoop-mapreduce-examples-*.jar grep input output 'dfs[a-z.]+'
查看的是位于 HDFS 中的输出结果 :
./bin/hdfs dfs -cat output/*
从HDFS中把数据取回本地:
rm -r ./output # 先删除本地的 output 文件夹(如果存在)
./bin/hdfs dfs -get output ./output # 将 HDFS 上的 output 文件夹拷贝到本机
cat ./output/*
./bin/hdfs dfs -rm -r output # 删除 HDFS 中的output 文件夹
最新文章
- LeetCode Nested List Weight Sum
- [WARNING]考前必读?!
- Go语言学习笔记1 变量,类型以及赋值
- ASP.NET 表单验证实现浅析
- 关于JAVA日志
- Android 手机卫士--构建服务端json、请求网络数据
- Node.js在Windows与Linux下的安装
- 使用CMD命令设置IP
- js获取url的参数值
- SunDay天气——开放源代码
- python 下的数据结构与算法---2:大O符号与常用算法和数据结构的复杂度速查表
- Google Chrome源码剖析【序】
- CSDN资源页面挂掉了?
- 虚拟环境管理工具virtualenvwrapper-win初试
- spring mvc 提交数组等复杂类型
- 专题:DUILIB Win32 透明效果
- Dollar Dayz poj3181
- vue 基础-->;进阶 教程(1): 基础(数据绑定)
- iOS Label 自适应高度
- properties文件操作
热门文章
- 用Java写一个生产者-消费者队列
- TWaver推智能手表挑战华为苹果
- JQuery 的toggle() 方法如何使用?
- 大理石在哪儿(Where is the Marble?,Uva 10474)
- Python学习之前
- BZOJ 1468 Tree 【模板】树上点分治
- [bzoj2461][BeiJing2011][符环] (括号配对+记忆化搜索+高维dp)
- codevs3410 别墅房间
- TortoiseGit推送失败的问题
- zoj——1202 Divide and Count