首页 > 解决方案 > Hive tez 查询失败并出现 java.io.IOException

问题描述

执行一个长时间运行的 Hive Tez 查询,它很少会失败:

java.io.IOException: File hdfs://XXX with newer attempt ID 1 is smaller than the file hdfs://YYY with older attempt ID 0

在我们的 20 节点 HDP 3.1.5 集群(Hive 3.1.0 和 Tez 0.9.1)中,它在大约 200 次执行中失败了一次

标签: hadoophiveapache-tez

解决方案


我们在哪里击中HIVE-23354

它似乎没有解决方法。在 Hive 4.0.0 解决了


推荐阅读