Hadoop初体验
2024-10-08 07:28:50
1.首先准备环境
系统:Linux(centOS)
jdk:1.7
这里jdk要安装配置完成,具体步骤参考:Linux环境下安装JDK
注意:本次没有配置免密登录,所以在启动和停止的时候回让你输入多次密码!!!
2.下载安装包
官网地址:
https://hadoop.apache.org/
选择版本:
下载地址:
http://mirror.bit.edu.cn/apache/hadoop/common/hadoop-2.7.7/hadoop-2.7.7.tar.gz
在Linux服务器上直接执行
wget http://mirror.bit.edu.cn/apache/hadoop/common/hadoop-2.7.7/hadoop-2.7.7.tar.gz
解压安装包
tar zxvf hadoop-2.7..tar.gz
移动解压后的文件夹hadoop-2.7.到usr目录下创建的hadoop文件夹下:
mv ./hadoop-2.7. /usr/hadoop/
编辑文件
1./usr/hadoop/hadoop-2.7.7/etc/hadoop/hadoop-env.sh
vim /usr/hadoop/hadoop-2.7./etc/hadoop/hadoop-env.sh
2./usr/hadoop/hadoop-2.7.7/etc/hadoop/core-site.xml
<!-- 指定HDFS老大(namenode)的通信地址 -->
<property>
<name>fs.defaultFS</name>
<value>hdfs://0.0.0.0:9000</value>
</property>
<!-- 指定hadoop运行时产生文件的存储路径 -->
<property>
<name>hadoop.tmp.dir</name>
<value>/home/root/hadoop/temp</value>
</property>
3./usr/hadoop/hadoop-2.7.7/etc/hadoop/hdfs-site.xml
<!-- 设置hdfs副本数量 -->
<property>
<name>dfs.replication</name>
<value></value>
</property>
格式化
/usr/hadoop/hadoop-2.7./bin/hdfs namenode -format
启动
/usr/hadoop/hadoop-2.7./sbin/start-dfs.sh
停止
/usr/hadoop/hadoop-2.7./sbin/stop-dfs.sh
访问地址
http://IP地址:50070
最新文章
- 网络爬虫: 从allitebooks.com抓取书籍信息并从amazon.com抓取价格(1): 基础知识Beautiful Soup
- [Reproduced works]MongoDB Unauthorized Access Vulnerability
- MySQL主从同步报错排错结果及修复过程之:Slave_SQL_Running: No
- 程序猿,千万别说你不了解Docker!
- 【转】【WebDriver】不可编辑域和日历控件域的输入 javascript
- git忽略以点开头的文件夹
- 邻接表有向图(三)之 Java详解
- Gershgorin圆盘定理
- 用python处理数学问题
- 学习Javascript DOM 编程艺术的一点心得
- Lucene.Net 2.3.1开发介绍 —— 二、分词(二)
- 记忆 : Odata $count
- ORACLE获取表信息方法
- H5游戏见缝插针开发
- C#中获取当前系统中安装的所有字体及预定义颜色
- adb常用命令(golang版)及输入中文
- 30天代码day4 Class vs. Instance
- laravel 框架后台主菜单接口
- [Linux]systemd和sysV
- How to distinguish between strings in heap or literals?