Hive 使用达梦DM8 无法识别 “COMMENT” 问题

  1. 将达梦数据库驱动 DmJdbcDriver18-8.1.2.192.jar 导入到 hive 的 lib 文件夹下

  2. 修改 hive 配置文件,增加 dm 数据库相关信息

    c 复制代码
    <property>
         <name>javax.jdo.option.ConnectionURL</name>
          <value>jdbc:dm://127.0.0.1:5236?SCHEMA=hive</value>
         <description>
           JDBC connect string for a JDBC metastore.
           To use SSL to encrypt/authenticate the connection, provide database-specific SSL flag in the connection URL.
           For example, jdbc:postgresql://myhost/db?ssl=true for postgres database.
         </description>
     </property>
    
      <property>
         <name>javax.jdo.option.ConnectionDriverName</name>
         <value>dm.jdbc.driver.DmDriver</value>
         <description>Driver class name for a JDBC metastore</description>
       </property>
     <property>
    
     <property>
         <name>javax.jdo.option.ConnectionUserName</name>
         <value>SYSDBA</value>
         <description>Username to use against metastore database</description>
     </property>
    
     <property>
         <name>javax.jdo.option.ConnectionUserName</name>
         <value>SYSDBA</value>
         <description>Username to use against metastore database</description>
       </property>
     <property>
  3. 在导入数据时,出现无法识别 "COMMENT" 关键字错误,报 return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask, MetaException(message:Add request failed : INSERT INTO COLUMNS_V2 ...)错误,如下图:

    (1)经过排查 hive lib包下 datanucleus-rdbms-4.1.19.jar 源代码,缺少 "COMMENT" 关键字

    datanucleus-rdbms-4.1

    (2)官方源码地址::链接

    (3)修改 org.datanucleus.store.rdbms.adapter 下的 BaseDatastoreAdapter类 或者 org/datanucleus/store/rdbms/adapter/SQLConstants.java 类,在

    SQL99_RESERVED_WORDS 增加 "COMMENT"

    (4)重新打包后,替换Hive/lib下 的 datanucleus-rdbms-4.1.19.jar 包,重新执行hive命令即可成功

    (5)已经重新打包的 datanucleus-rdbms-4.1.19.jar提取码:1234

  4. 与原作者沟通后,得到回复大概意思是 "COMMENT" 在SQL92、SQL99、SQL2003 标准中不是保留关键字,所以后续也不会增加这个关键字,如有需求自行添加打包使用。

相关推荐
lamb张1 分钟前
MySQL锁
数据库·mysql
ForRunner12332 分钟前
使用 Python 高分解决 reCAPTCHA v3 的指南
数据库·python·microsoft
躺平的花卷1 小时前
Python爬虫案例六:抓取某个地区某月份天气数据并保存到mysql数据库中
数据库·爬虫·python·mysql
Flying_Fish_roe2 小时前
linux-安全管理-防火墙与网络安全
linux·数据库·oracle
A_cot2 小时前
Redis 的三个并发问题及解决方案(面试题)
java·开发语言·数据库·redis·mybatis
人生百态,人生如梦3 小时前
大数据处理从零开始————3.Hadoop伪分布式和分布式搭建
hadoop·分布式
2401_847056553 小时前
Altium Designer脚本工具定制
网络·数据库
神仙别闹3 小时前
基于Python+SQLite的课程管理系统
数据库·sqlite
掐指一算乀缺钱3 小时前
SpringBoot 数据库表结构文档生成
java·数据库·spring boot·后端·spring
少年负剑去3 小时前
django分发路由
数据库·django·sqlite