HDFS修改副本数,并生效。
2024-08-25 06:33:28
1、hadoop集群使用的ucloud的uahdoop
2、是公司集群配置小,只有两台core节点,实际就是两台的datanode。 容量占用超过了80%,需要缩减副本以空出容量。
3、查看
hadoop fs -du -h /user/hive/warehouse/xxwarehouse.db/xx_datasourceraw/partitiondate=2019-10-31
可以看到,每个文件三个副本。
4、执行
hdfs dfs -setrep -R 2 /
将所有的已经上传的副本从3个变成了两个
5、再执行第三步脚本确认。
6、最后修改hdfs-site.xml的dfs.replication值为2,这个参数直接通过uhadoop管理后台可以直接修改。
修改后自动重启了服务并生效。
over
最新文章
- Android获取ImageView上的图片,和一个有可能遇到的问题!
- 连载《一个程序猿的生命周期》-6、自学C++,二级考过后,为工作的机会打下了基础
- 【leetcode】Maximal Rectangle (hard)★
- 二模 (16) day1&;day2
- [CareerCup] 9.11 Parenthesize the Expression 表达式加括号
- 最大ASCII的和问题
- Open vSwitch安装及配置
- xcode C++一些简单设置
- jquery实现点击按钮滑动到指定位置
- 【转】javascript-图片预加载技术
- [Kafka] - Kafka基本操作命令
- JDBC操作数据库之查询数据
- 使用Java API连接和操作HBase数据库
- JQ倒计时,正计时
- Lib作为“静态库”与“动态库”中的区别
- php输出日志
- CSV 数字转化文本
- Linux-系统负载
- _mysql.c:29:20: error: Python.h: No such file or directory
- java.lang.IllegalStateException: BeanFactory not initialized or already closed - call 'refresh' before accessing beans via the ApplicationContext
热门文章
- elasticsearch must 和 should 并列的情况
- es聚合后排序
- git使用.gitignore文件忽略相关文件上传
- 阿里云ECS-使用putty产品psftp工具上传下载
- 转:spring mvc 设置@Scope(";prototype";)
- Httpd服务入门知识-Httpd服务常见配置案例之修改监听的IP和Port
- 解决Mac OS X 系统在home文件夹下面操作不支持的方法
- 性能测试基础---联机负载&;IP欺骗
- query_posts函数使用方法小结|wordpress技巧
- WHAT IS GAME-BASED LEARNING?