Hive ddl не работает с java.lang.ClassNotFoundException - org.apache.hadoop.hive.serde2.SerDe

Попытка загрузить файл данных XML в таблицу куста, ошибка создания таблицы. Может ли кто-нибудь мне помочь:)-. Ниже приведен файл ddl hql с использованием версии hive 2.3.7.

Получение ошибки FAILED: ошибка выполнения, код возврата 1 из org.apache.hadoop.hive.ql.exec.DDLTask. org/apache/hadoop/ улей /serde2/SerDe


    Caused by: java.lang.ClassNotFoundException: org.apache.hadoop.hive.serde2.SerDe
        at java.net.URLClassLoader.findClass(URLClassLoader.java:381)
        at java.lang.ClassLoader.loadClass(ClassLoader.java:424)
        at sun.misc.Launcher$AppClassLoader.loadClass(Launcher.java:335)
        at java.lang.ClassLoader.loadClass(ClassLoader.java:357)
        ... 44 more
    
    FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask. org/apache/hadoop/hive/serde2/SerDe


HQL-Script:

Given bewlow the ddl hql file.Using hive 2.3.7 version.
add jar /home/userx/apache-hive-2.3.7-bin/lib/hivexmlserde-1.0.0.0.jar;
add jar /home/userx/apache-hive-2.3.7-bin/lib/hive-hcatalog-core-2.3.7.jar;
add jar /home/userx/apache-hive-2.3.7-bin/lib/hive-serde-2.3.7.jar;

drop table if exists xmltablenested;

create table if not exists xmltablenested
(
name string,
age string,
contacts array<struct<mobile:string>>
)
row format serde 'com.ibm.spss.hive.serde2.xml.XmlSerDe'
with serdeproperties 
(
"column.xpath.name" = "/company/emp/name/text()",
"column.xpath.age" = "/company/emp/age/text()",
"column.xpath.contacts" = "/company/emp/contacts"
)

stored as 
inputformat 'com.ibm.spss.hive.serde2.xml.XmlInputFormat'
outputformat 'org.apache.hadoop.hive.ql.io.IgnoreKeyTextOutputFormat'

tblproperties (
"xmlinput.start" = "<company>",
"xmloutput.end" = "</company>" )
;

0 ответов

Другие вопросы по тегам