大叔经验分享(47)yarn开启日志归集
日志 分享 开启 经验 yarn 47 大叔
2023-09-14 09:00:07 时间
yarn开启日志归集功能,除了配置之外
yarn.log-aggregation-enable=true
还要检查/tmp/logs目录是否存在以及权限,尤其是在开启kerberos之后,有些目录可能不能自动创建成功,需要手工创建:
$ hdfs dfs -mkdir /tmp
$ hdfs dfs -chmod 777 /tmp
每个应用的hdfs日志目录:
/tmp/logs/$user/logs/$applicationId
如果上述日志目录存在但是还是查不出来
Log aggregation has not completed or is not enabled.
可能是因为用户权限,可以切换到对应的用户再查询
# sudo -u $user yarn logs -applicationid=$applicationId
相关文章
- binlog日志记录什么内容_mysqlbinlog日志在哪
- C#实现UI控件输出日志的方法案例分享
- springboot支付项目之日志配置
- 【Java】Log4j日志
- mysql 慢查询日志详解数据库
- 分析Linux端口日志分析:洞察服务器安全(linux端口日志)
- 日志Linux 日志分割:按日期管理更有效率(linux按日期分割)
- haproxy-自定义日志格式
- 无日志文件附加SQL Server 2005数据库
- MySQL日志记录时间的重要性(mysql日志时间)
- 探索redis日志,追求完整记录(查询redis日志)
- Oracle会话日志记录记录应用程序及其会话(oracle会话日志记录)
- c#文件助手类分享(读取文件内容操作日志文件)
- mysql正确安全清空在线慢查询日志slowlog的流程分享
- linux系统中c++写日志文件功能分享
- Perl遍历目录和使用Linux命令分析日志的代码实例分享
- IIS日志报Connections_Refused问题的解决方法