无法验证serde: org.apache.hadoop.hive.contrib.serde2.MultiDelimitSerDe

Question

在Hive上创建表时获取Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask. Cannot validate serde: org.apache.hadoop.hive.contrib.serde2.MultiDelimitSerDe。下面是表创建脚本：

CREATE EXTERNAL TABlE ratings(user_id INT, movie_id INT,rating INT,rating_time String) 
ROW FORMAT SERDE 'org.apache.hadoop.hive.contrib.serde2.MultiDelimitSerDe'
WITH SERDEPROPERTIES ("field.delim"="::")
LOCATION '/user/hive/ratings';

HDP版本: 2.1.1

Answer 1

您正面临这个问题，因为您的hive没有或hive-site.xml没有指向它。

检查'/usr/lib/hive/lib'文件夹。这个文件夹中一定有一个jar hive-contrib-<version>.jar。

如果您在该文件夹中找不到任何jar，请从这个链接下载它

请注意正确的版本。

现在，将该文件放到上面提到的hive文件夹中。您可以通过两种方式将此文件添加到您的hive CLI中。

1. 一次会议：

add jar /usr/lib/hive/lib/hive-contrib-<version>.jar;

1. 要获得永久解决方案:将其添加到您的hive-site.xml中 <property> <name>hive.aux.jars.path</name> <value>/usr/lib/hive/lib/*</value> </property> P.S: MultiDelimitSerDe类是在hivecontrig-0.13之后添加的，请确保您使用的是正确的版本