找不到Hive UDF类

Question

我在Hive中需要一个自动递增的整数列，并在UDFRowSequence中偶然发现。

我在IntelliJ中创建了一个Maven项目，添加了.java文件，然后让IDE导入依赖项。 然后，我运行mvn package ，将生成的.jar复制到群集节点，然后在Hive中添加.jar资源：

hive> add file udf-row-sequence-1.0-SNAPSHOT.jar;
Added resources: [udf-row-sequence-1.0-SNAPSHOT.jar]

不幸的是，我无法创建临时功能：

hive> create temporary function row_sequence as 'com.alexwoolford.hive.udf.UDFRowSequence';
FAILED: Class com.alexwoolford.hive.udf.UDFRowSequence not found
FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.FunctionTask

但是，如果查看.jar文件的内容，我可以看到该类存在：

jar tf udf-row-sequence-1.0-SNAPSHOT.jar
[...]
com/alexwoolford/hive/udf/UDFRowSequence.class
[...]

你能看到我做错了吗？

Answer 1

该问题是由使用add file而不是add jar ，即

add jar udf-row-sequence-1.0-SNAPSHOT.jar;

Answer 2

即使您执行“ ADD JAR”，有时甚至添加JARS的顺序也很重要，但是在添加ESRI Hive UDF jar时，我遇到了这个问题。

add jar esri-geometry-api-1.2.jar;
add jar spatial-sdk-hive-1.0.3-SNAPSHOT.jar;

作品

add jar spatial-sdk-hive-1.0.3-SNAPSHOT.jar;
add jar esri-geometry-api-1.2.jar;

不起作用