启用hdfs的高可用
2024-09-05 16:07:42
cm-HDFS:
选择另外一个节点的做NN, 生产选node3
选择三个节点作journalNode, node2,3,4
填入journalNode的目录/dfs/jn
经过一系列步骤,如果没报错
点继续:
停止所有hive服务:
注: 生产的数据量比较大, 更新花费的时间比较长6-8个小时
重启hive服务:
再看hdfs看到新出现的服务:
注意:
1/ 高可用启用后,hdfs入口地址发生变化,如代码里有配的,需从node4.datalake.opay.com:8020改为集群地址warehourse:8020或warehourse
即: hdfs://node4.datalake.opay.com:8020 改为hdfs://warehourse
2/ 使用hue, web界面角色要改为活动的NN,用备用NN在hue中使用hdfs会有问题
最新文章
- Selenium-java-testng插件安装eclipse
- java和Javascript的区别
- Cocos2dx.3x入门三部曲-软件环境配置(一)
- 移动开发 android 入门开发 阶段视频
- I2C I2S SPDIF
- 伪装隐藏Nginx,PHP版本号提升服务器安全性
- 使用NetUserAdd API函数创建远程用户
- 团队项目第二阶段个人进展——Day4
- 谈谈axios配置请求头content-type
- parallels desktop for mac安装虚拟机 之parallelsdesktop密钥 以及 parallels desktop安装win10的办公推荐可以提高办公效率
- Scrapy 框架 增量式
- 【XSY2691】中关村 卢卡斯定理 数位DP
- 洛谷P2949 工作调度Work Scheduling [USACO09OPEN] 贪心
- hdu 6127---Hard challenge(思维)
- day34-常见内置模块三(re模块)
- golang语言调试
- MYSQL语句:创建、授权、查询、修改、统计分析等 二 用户的创建、权限设置、删除
- hadoop 1.1.2和 hive 0.10 和hbase 0.94.9整合
- iptables Configuration
- [Z3001] connection to database 'zabbix' failed: [1045] Access denied for user 'zabbix'@'localhost' (using password: YES)