在哪里可以找到Apache Tez的作業執行日志

Question

我已經在hadoop上設置了tez。 我正在運行查詢select COUNT(DISTINCT first_name) from user_test where country='India'; 使用蜂巢。

當我使用hive.execution.engine=mr （mr）作為執行環境時，Job成功執行，並且可以在Hadoop UI上看到日志。 但是當使用tez運行相同的作業時，我遇到了以下錯誤，並且我也找不到日志。

Launching Job 1 out of 1 FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.tez.TezTask

我無法找到該錯誤的詳細日志，無法獲取生成日志文件的任何幫助。

Answer 1

在配置單元控制台日志中查找applicationId。 然后可以通過以下方式獲取日志：

$ bin / yarn日志-applicationId> app_logs.txt

Answer 2

如果您使用的是HDP（Hortonworks發行版），則可以使用Tez視圖，使用瀏覽器瀏覽Tez日志。