当前位置: 首页 > news >正文

hadoop job 日志的查看

hadoop执行完任务一般有几个地方可以查看:

1、通过本地日志目录查看对应container日志文件,默认在hadoop的安装目录下的/logs/userlogs/:直接用查看文件命该地方的应用运行日志不一定最全,因为任务运行日志由每一个NM产生在本地,然后再给聚合到文件系统中(配置聚合日志功能)。

2、使用命令查看:

[hadoop@hadoop01 ~]$ yarn logs -applicationId application_1523430872525_0002 

其中application_1523430872525_0002是任务的编号。

   我是用第二种方式查看了任务的log。第一种发现地下没有生成日志文件。

相关文章:

  • Jersey采用模板Freemarker输出
  • hadoop连接hdfs报错Call From master/172.27.0.5 to master:8020 failed on connection exception: 问题的解决
  • Linux命令手册
  • kernel:NMI watchdog: BUG: soft lockup - CPU#6 stuck for 28s! CentOS7linux中内核被锁死
  • reactjs服务器端渲染——node搭建简易服务器
  • java后台接收前端对象数组
  • MyBatis 中if 标签 判断字符串不生效
  • 开源大数据周刊-第20期
  • Linux新建Oracle用户和数据库并导入sql文件
  • layui 数据表格内嵌上传按钮,并在上传中增加所在行的id或其他属性
  • 重启oracle的方法
  • ios中屏幕旋转的控制
  • 已有实例创建新的数据库空间和用户,并授权
  • 关于margin和padding的总结
  • 关于kafka发送消息过大导致的异常的解决方式
  • [NodeJS] 关于Buffer
  • [数据结构]链表的实现在PHP中
  • 【407天】跃迁之路——程序员高效学习方法论探索系列(实验阶段164-2018.03.19)...
  • CentOS7 安装JDK
  • JavaScript 无符号位移运算符 三个大于号 的使用方法
  • Java超时控制的实现
  • Js实现点击查看全文(类似今日头条、知乎日报效果)
  • node 版本过低
  • PyCharm搭建GO开发环境(GO语言学习第1课)
  • 前端路由实现-history
  • 全栈开发——Linux
  • 如何进阶一名有竞争力的程序员?
  • 通过git安装npm私有模块
  • 带你开发类似Pokemon Go的AR游戏
  • 京东物流联手山西图灵打造智能供应链,让阅读更有趣 ...
  • ​​​​​​​sokit v1.3抓手机应用socket数据包: Socket是传输控制层协议,WebSocket是应用层协议。
  • ​【C语言】长篇详解,字符系列篇3-----strstr,strtok,strerror字符串函数的使用【图文详解​】
  • $redis-setphp_redis Set命令,php操作Redis Set函数介绍
  • (4)STL算法之比较
  • (C++17) std算法之执行策略 execution
  • (Python第六天)文件处理
  • (附源码)ssm基于微信小程序的疫苗管理系统 毕业设计 092354
  • (排序详解之 堆排序)
  • (七)c52学习之旅-中断
  • (三十五)大数据实战——Superset可视化平台搭建
  • (十二)springboot实战——SSE服务推送事件案例实现
  • (完整代码)R语言中利用SVM-RFE机器学习算法筛选关键因子
  • (转)我也是一只IT小小鸟
  • (转)用.Net的File控件上传文件的解决方案
  • .MyFile@waifu.club.wis.mkp勒索病毒数据怎么处理|数据解密恢复
  • .NET 实现 NTFS 文件系统的硬链接 mklink /J(Junction)
  • /var/lib/dpkg/lock 锁定问题
  • ?
  • [ 渗透测试面试篇 ] 渗透测试面试题大集合(详解)(十)RCE (远程代码/命令执行漏洞)相关面试题
  • [ 云计算 | Azure 实践 ] 在 Azure 门户中创建 VM 虚拟机并进行验证
  • [20181219]script使用小技巧.txt
  • [AIGC 大数据基础]hive浅谈
  • [C#]扩展方法
  • [cogs2652]秘术「天文密葬法」
  • [CSAWQual 2019]Web_Unagi ---不会编程的崽