Hive批处理作业的日志记录和监视

问题描述

这是我在这个论坛上的第一个问题。我正在将蜂巢批处理作业日志尽快写入到蜂巢日志表中,因为每个步骤都已完成。我正在使用INSERT INTO TABLE将日志写入配置单元表。 在配置单元中,将为每个批处理作业ID创建多个记录,因此我将创建一个View来合并在监视工具中使用之前收集的日志记录数据。 您能否提出任何更好的解决方案来实现这一目标?

注释:

  1. 我的批处理作业有多个步骤,我希望从每个步骤收集日志
  2. 我不想使用UPDATE
  3. 我无法上传图片。 Batch Job -> Logs -> Hive -> Monitoring

解决方法

暂无找到可以解决该程序问题的有效方法,小编努力寻找整理中!

如果你已经找到好的解决方法,欢迎将解决方案带上本链接一起发送给小编。

小编邮箱:dio#foxmail.com (将#修改为@)