CDP spark 无法读取hive表的问题

最近发现CDP中某些个别hive表, impala和hive可以正常读取,但spark 却读成空表,已排除spark参数和orc 的问题。

StackOverflow上有个相似问题 说是需要关闭以下参数:

bash 复制代码
hive.create.as.insert.only=false 
metastore.create.as.acid=false

但是实际在CDP安装完成,关闭ACID的时候,这两个参数都已经关闭了。

最后经过研究发现是严格模式的问题,

需要修改以下参数

bash 复制代码
hive.strict.managed.tables=false 

然后重新创建表即可

相关推荐
颜子鱼40 分钟前
git基础
大数据·git·elasticsearch
乌恩大侠3 小时前
AI-RAN 在 Spark上部署 Sionna-RK
大数据·分布式·spark
G皮T5 小时前
【ELasticsearch】索引字段设置 “index”: false 的作用
大数据·elasticsearch·搜索引擎·全文检索·索引·index·检索
程序员皮皮林7 小时前
Redis:大数据中如何抗住2000W的QPS
大数据·数据库·redis
武子康8 小时前
大数据-169 Elasticsearch 入门到可用:索引/文档 CRUD 与搜索最小示例
大数据·后端·elasticsearch
v***91308 小时前
PostgreSQL 中进行数据导入和导出
大数据·数据库·postgresql
千里念行客24010 小时前
国产射频芯片“小巨人”昂瑞微今日招股 拟于12月5日进行申购
大数据·前端·人工智能·科技
一水鉴天10 小时前
整体设计 定稿 之15 chat分类的专题讨论(codebuddy)
大数据·分类·数据挖掘
7***u21621 小时前
显卡(Graphics Processing Unit,GPU)架构详细解读
大数据·网络·架构
Qzkj6661 天前
从规则到智能:企业数据分类分级的先进实践与自动化转型
大数据·人工智能·自动化