1.本地模式

本地模式的安装

将hadoop 安装包解压后不用任何配置就是默认的本地模式

此时 core-site.xml ,hdfs-site.xml , marped.site.xml 三个配置文件都为空

此时没有hdfs文件系统,可以执行mapreduce

hadoop fs -ls / 会列出本地的linux文件系统

2. 伪分布式模式

需要配置core-site.xml ,hdfs-site.xml,marped-site.xml

core-site.xml

hdfs-site.xml

mapred.site.xml

此时默认hdfs的namenode数据存储在linux的/tmp/hadoop-hadoop/dfs

hadoop临时文件目录默认在hdfs文件系统

drwxr-xr-x   - hadoop supergroup          0 2016-02-21 01:04 /tmp/hadoop-hadoop

设置好配置文件后, 需要格式化hdfs系统 hadoop namenode -format

创建文件

hadoop fs -mkdir input

默认会创建在hdfs中的 /user/hadoop/input

hadoop为当前用户

运行mapreduce wordcount

hadoop  jar  hadoop-examples* wordcount input output

input,output,为hdfs的目录,重新执行时要删除output文件夹

启动hadoop

最新文章

  1. Yii 2.x 日志记录器-类图
  2. 网络连接详细信息出现两个自动配置ipv4地址
  3. C++ STL中vector的内存机制和性能分析
  4. mysql备份工具 :mysqldump mydumper Xtrabackup 原理
  5. WordPress模版结构
  6. SQL练习之不破坏应用程序现有查询的修改模式
  7. SQL Server中生成测试数据
  8. mycat
  9. linux redis安装
  10. 020 <one-to-one>、<many-to-one>单端关联上的lazy(懒加载)属性
  11. vuex之 mapState, mapGetters, mapActions, mapMutations 的使用
  12. 解析 STM32 的库函数
  13. laravel 处理自定错误页面,如404,500,501,502,503,504等等
  14. ajax跨域请求Flask后台
  15. Docker配置国内加速器加速镜像下载的方法
  16. 惊艳的HTML5动画特效及源码
  17. console.log等不能打印全部数据/信息
  18. 2016级算法期末上机-G.中等·Bamboo's Fight with DDLs II
  19. 又是新动作!微信小程序专属二维码出炉
  20. Android架构须知

热门文章

  1. web服务器、应用服务器、http服务器区别
  2. 开源入侵检测系统OSSEC搭建之二:客户端安装
  3. Servlet中如何实现页面转发
  4. Java API —— 泛型
  5. 量化Hacker News 中50天的数据 Quantifying Hacker News with 50 days of data
  6. linux PATH环境变量
  7. 无法生成临时类(result=1)。 error CS0229: “DCSoftDotfuscate.aam.a”与“DCSoftDotfuscate.aam.a()”之间存在二义性
  8. git push提示或错误
  9. Form验证(转)
  10. UVa 1328 (KMP求字符串周期) Period