注意：使用 ROW FORMAT SERDE 'org.apache.hadoop.hive.serde2.JsonSerDe' 这种方式 需要json中的属性名和表中的字段名保持一致。
假如你使用sparksql去创建hive表，遇到了jsonSerDe 需要导入包
org.apache.hive.service.cli.HiveSQLException: Error running query: org.apache.spark.sql.AnalysisException: org.apache.hadoop.hive.ql.metadata.HiveException: java.lang.RuntimeException: MetaException(message:java.lang.ClassNotFoundException Class org.apache.hadoop.hive.serde2.JsonSerDe not found)
解决方案
建表时，使用org.apache.hive.hcatalog.data.JsonSerDe ，这个类对应的jar是 hive-hcatalog-core-3.1.2.jar
而 org.apache.hadoop.hive.serde2.JsonSerDe 类，对应的jar包是/opt/installs/hive/lib/hive-serde-3.1.2.jar,/opt/installs/hive/lib/hive-common-3.1.2.jar
最终的一个解决方案：可以在spark中，直接把这两个包到 spark的jars 下。
(base) [root@bigdata01 moni_data]# cp /opt/installs/hive/lib/hive-serde-3.1.2.jar /opt/installs/spark/jars/
(base) [root@bigdata01 moni_data]# cp /opt/installs/hive/lib/hive-common-3.1.2.jar /opt/installs/spark/jars/
xsync.sh hive-serde-3.1.2.jar hive-common-3.1.2.jar
需要重启thrift 服务：
这个命令在 spark里的sbin 里。
stop-thriftserver.sh 然后再启动