CDH 无法查看history log
2024-08-27 07:07:56
1.配置（core-site.xml）
<property>
<name>hadoop.http.staticuser.user</name>
<value>hdfs</value>
</property>
2.发现8041端口无法查看日志（8041 是服务node manager拥有），而log 写入的用户是hdfs 所属组是supergroup
3.hadoop master 或者slave 的linux中都没有supergroup组
注意：cdh5.5.2 默认已经开启日志聚合功能
资料显示：History Server 在Job运行时，日志的显示直接从本地文件读取，在运行结束且聚合日志到hdfs中，会有专门的服务从hdfs读取并且渲染
（中间会有跳转，判断对应的containner 是否存在，如果存在说明job还在运行，日志还没有聚合，如果不存在，说明日志已经聚合到hdfs,所以需要从hdfs读取）
处理：
groupadd supergroup
usermod -a -G supergroup yarn
usermod -a -G supergroup mapred
在每个节点上执行
最新文章
- 写出易调试的SQL(修订版)
- PHP流式上传和表单上传（美图秀秀）
- Java %c0%ae 安全模式绕过漏洞
- WCF多种调用方式兼容
- OMG 在线思维导图都有开源的
- Jquery（）核心函数的7个重载方法
- 1113: [Poi2008]海报PLA
- canvas图形处理和进阶用法
- (NO.00001)iOS游戏SpeedBoy Lite成形记(八)
- 2.NB-IoT及通信协议
- Spring Boot(六)：如何使用mybatis
- apache显示目录文件列表
- HDU2717 Catch That Cow 【广搜】
- DIV CSS 绘制风车
- 使用<% =Type%>获取后台值时报错：控件包含代码块(即 <% ... %>)，因此无法修改控件集合。
- 不把DB放进容器的理由
- New Concept English Two 22 58
- C#三种模拟自动登录和提交POST信息的实现方法【转】
- vue 移动端，页面左右页面切换效果（切换过程中会出现白屏效果，布吉岛怎么优化，后来就发布前就弃用了）
- win10网速慢