HDFS——完全分布式搭建
2024-09-03 13:00:20
架构
NN--namenode
SNN--secondnamenode
DN--datanode
hadoop_env.sh中修改JAVA_HOME
core-site.xml
<property>
<name>fs.defaultFS</name>
<value>hdfs://node1:9000</value>
</property>
<property>
<name>hadoop.tmp.dir</name>
<value>/opt/hadoop</value>
</property>
hdfs-site.xml
<property>
<name>dfs.replication</name>
<value>3</value>
</property>
<property>
<name>dfs.namenode.secondary.http-address</name>
<value>node2:50090</value>
</property>
新建masters 指定secondnamenode
node2
slaves:
node2
node3
node4
scp ./* node4:`pwd` 同步配置
格式化
hdfs namenode -format
启动
start-dfs.sh
1、关闭firewall:
systemctl stop firewalld.service #停止firewall
systemctl disable firewalld.service #禁止firewall开机启动
firewall-cmd --state #查看默认防火墙状态(关闭后显示notrunning,开启后显示running)
最新文章
- aspcms 留言 搜索
- python os.system()返回值判断
- projecteuler Problem 8 Largest product in a series
- Anywhere服务建立及连接步骤
- 学习总结 java 创建及其练习
- 如何使用nodejs发邮件
- Python拼接多张图片
- (转载)HTTP URL
- CountDownLatch(倒计时计数器)使用说明
- storm学习之入门篇(一)
- 学习笔记:javascript 表单对象(form)
- Python笔记&#183;第五章—— 列表(List) 的增删改查及其他方法
- jQuery(四)、文档处理
- UOJ#36. 【清华集训2014】玛里苟斯 线性基
- 【春华秋实】.NET Framework与.NET Core
- android -------- 压缩图片文件工具类
- vue.js项目nginx部署
- js 字符串格式化
- 基于Redis+Kafka的首页曝光过滤方案
- c#本地缓存实现
热门文章
- SCUT - 484 - 平面上的点 - 数据结构
- unsolved question&#39;s solution
- RESTful API 设计总结
- SpringMVC设置不拦截静态资源css,js
- MongoDB的使用学习之(五)Spring集成MongoDB以及简单的CRUD
- Django模型层1
- Java设计模式之——代理设计模式
- Linux下用命令查看CPU ID以及厂家等信息
- 树状数组求LIS模板
- Sublime3 配置node.js 环境 The process ";node.exe"; not found