首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >将XML加载到配置单元时出现空指针异常

将XML加载到配置单元时出现空指针异常
EN

Stack Overflow用户
提问于 2017-08-14 21:21:28
回答 1查看 266关注 0票数 0

我目前在使用hive-serde将xml文件加载到Hive时遇到了一些问题。我遵循了这里的提示,但在尝试读取通过xml文件加载到hive中的数据时,仍然收到空指针异常。下面的SQL运行正常,只有在尝试从表中读取时才会出现问题

下面是包含一些虚拟值的xml

代码语言:javascript
复制
    <?xml version="1.0"?><History-Group-Comm-CommB-DT-RBB-Work 
    xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance">
    <item id="HISTORY_6_GMT">
    <pxAddedByID>HUBINT</pxAddedByID>
    <pxAddedBySystem>CD</pxAddedBySystem>
    <pxHistoryForReference>GR</pxHistoryForReference>
    <pxInsName>GMT</pxInsName>
    <pxObjClass>Work</pxObjClass>
    <pxTimeCreated>2017-02-13T13:08:28.776Z</pxTimeCreated>
    <pyFlowKey>RULE-OBJ</pyFlowKey>
    <pyFlowName>pyStartCase</pyFlowName>
    <pyFlowType>pyStartCase</pyFlowType>
    <pyMessageKey>ItemCreated</pyMessageKey>
    <pyPerformer>HUB</pyPerformer>
    <pzInsKey>776 GMT</pzInsKey>
    </item>

加载xml的sql如下所示

代码语言:javascript
复制
    add jar hdfs://DEVHDPVM01HA:8020/HADOOP/DASD_ACQ/common/lib/hivexmlserde-1.0.5.3.jar;


     DROP TABLE IF EXISTS test.test_tbl_stg;
     CREATE EXTERNAL TABLE test.test_tbl_stg  (
     ADDED_BY_ID STRING COMMENT 'pxAddedByID',
     ADDED_BY_SYSTEM STRING COMMENT 'pxAddedBySystem',
     HISTORY_FOR_REFERENCE STRING COMMENT '',
     INSERT_NAME STRING COMMENT '',
     OBJECT_CLASS STRING COMMENT '',
     TIME_CREATED STRING COMMENT '',
     FLOW_KEY STRING COMMENT '',
     FLOW_NAME STRING COMMENT '',
     FLOW_TYPE FLOAT COMMENT '',
     MESSAGE STRING COMMENT '',
     PERFORMER STRING COMMENT '',
     INSERT_KEY STRING COMMENT '' ) COMMENT 'Optional Table Comment'
     ROW FORMAT SERDE 'com.ibm.spss.hive.serde2.xml.XmlSerDe'
     WITH SERDEPROPERTIES (
     "column.xpath.ADDED_BY_ID"="/item/pxAddedByID/text()", 
     "column.xpath.ADDED_BY_SYSTEM"="/item/pxAddedBySystem/text()",
   "column.xpath.HISTORY_FOR_REFERENCE"="/item/pxHistoryForReference/text()",
    "column.xpath.INSERT_NAME"="/item/pxInsName/text()",
    "column.xpath.OBJECT_CLASS"="/item/pxObjClass/text()",
    "column.xpath.TIME_CREATED"="/item/pxTimeCreated/text()",
    "column.xpath.FLOW_KEY"="/item/pyFlowKey/text()",
    "column.xpath.FLOW_NAME"="/item/pyFlowName/text()",
    "column.xpath.FLOW_TYPE"="/item/pyFlowType/text()",
    "column.xpath.MESSAGE"="/item/pyMessageKey/text()",
    "column.xpath.PERFORMER"="/item/pyPerformer/text()",
    "column.xpath.INSERT_KEY"="/item/pzInsKey/text()")
    STORED AS
    INPUTFORMAT 'com.ibm.spss.hive.serde2.xml.XmlInputFormat'
    OUTPUTFORMAT 
    'org.apache.hadoop.hive.ql.io.HiveIgnoreKeyTextOutputFormat'
    LOCATION '${stagingFolderPath}'
    TBLPROPERTIES ("xmlinput.start"="<item id=","xmlinput.end"="</item>");

任何关于为什么会发生空指针异常的建议都是非常感谢的。

EN

回答 1

Stack Overflow用户

回答已采纳

发布于 2017-08-14 22:41:10

将此字段数据类型FLOW_TYPE FLOAT COMMENT '‘转换为FLOW_TYPE STRING COMMENT '',

因为转换,我认为你正面临着这个问题

票数 1
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/45675508

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档