安装JDK1.8

查看JDK1.8的安装

https://www.cnblogs.com/TJ21/p/13715749.html

安装hadoop

上传hadoop

下载hadoop     地址http://mirrors.hust.edu.cn/apache/hadoop/common/

放到mkdir  /usr/local/src/hadoop目录下 
解压   tar -zxvf hadoop-2.9.2.tar.gz   

配置环境变量

vi  /etc/profile   添加如下配置

export HADOOP_HOME=/usr/local/src/hadoop/hadoop-2.9.2
export PATH=$HADOOP_HOME/bin:$PATH 重新刷新配置 source /etc/profile 查看版本 hadoop version

修改配置文件

vi core-site.xml

路径是  cd /usr/local/src/hadoop/hadoop-2.9.2/etc/hadoop

  vi core-site.xml   添加如下配置

<property>

<name>fs.defaultFS</name>

<!-- 这里填的是你自己的ip,端口默认-->

<value>hdfs://192.168.0.130:9000</value>

</property>

<property>

<name>hadoop.tmp.dir</name>

<!-- 这里填的是你自定义的hadoop工作的目录,端口默认-->

<value>/usr/local/src/hadoop/hadoop-2.9.2/tmp</value>

</property>

<property>

<name>hadoop.native.lib</name>

<value>false</value>

<description>Should native hadoop libraries, if present, be used.

</description>

</property>

vi  hadoop-env.sh   配置成你自己的jdk安装路径

vi hdfs-site.xml

  <property>
<name>dfs.replication</name>
<value>1</value>
</property> <property>
<name>dfs.secondary.http.address</name> <!--这里是你自己的ip,端口默认-->
<value>192.168.0.130:50090</value>
</property>

vi mapred-site.xml

复制默认的cp mapred-site.xml.template ./mapred-site.xml 配置命名为mapred-site.xml

vi mapred-site.xml  添加如下配置

<property>
<name>mapreduce.framework.name</name>
<value>yarn</value>
</property>

配置yarn-site.xml

<property>
<name>yarn.resourcemanager.hostname</name>
<!-- 自己的ip端口默认 -->
<value>192.168.0.130</value>
</property>
<!-- reducer获取数据的方式 -->
<property>
<name>yarn.nodemanager.aux-services</name>
<value>mapreduce_shuffle</value>
</property>

配置完成启动

配置好之后切换到sbin目录下

cd /usr/local/src/hadoop/hadoop-2.9.2/sbin/  查看命令 ll

格式化hadoop文件格式,执行命令  hadoop namenode -format,成功之后启动

执行启动所有命令

./start-all.sh 

没启动一个进程需要输入密码,可以通过配置ssh来解决,就不需要输入了,暂时配置

使用  jps   查看进程,能看到这些进程证明启动成功了,

也可以通过网页来查看  192.168.0.130:50070   此处的ip是自己的虚拟机IP

关闭防火墙的方法为:

systemctl stop firewalld.service            #停止firewall

systemctl disable firewalld.service        #禁止firewall开机启动

最新文章

  1. Yii2中的环境配置
  2. Caffe proto閱讀
  3. Follow me to learn what is Unit of Work pattern
  4. c++库大全
  5. React Native相关
  6. SQL server 2008 建立新用户
  7. 如何让R代码按计划执行
  8. DIV+CSS 基础
  9. 在shell的if条件里,判断 a&gt;0 且 (b&gt;0 或 c&gt;0) ,如何编写?
  10. POJ2230 Watchcow【欧拉回路】
  11. SPOJ 0287 Smart Network Administrator
  12. n%i之和
  13. IO库 8.4
  14. JavaScript基础——变量、语句、注释
  15. celery出现警告或异常的解决方式
  16. hdu 3473 划分树
  17. ASP.NET Core 从 gitlab-ci 环境变量读取配置
  18. SetTimer API函数
  19. 关于Oracle 10.2.0.5 版本应用SCN补丁14121009相关问题
  20. cat命令详解

热门文章

  1. Axios的正确食用方法
  2. 拆分函数Splitter.Split…(Power Query 之 M 语言)
  3. JVM 常见面试题指南
  4. 奇怪的现象,打印出来可以见到数据,在右边看不到数据,放到list里在页面上也显示不了数据
  5. VMware 打开虚拟机出现另一个程序已锁定文件的一部分,进程无法访问
  6. 【LeetCode】5685. 交替合并字符串 Merge Strings Alternately (Python)
  7. 第三十一个知识点:Game Hopping证明
  8. Chapter 20 Treatment-Confounder Feedback
  9. 微信小程序-自定义菜单导航(实现楼梯效果)
  10. 【MySQL作业】DDL 和 DML——美和易思使用 DML 删除表数据应用习题