hive插入动态分区数据时,return code 2报错解决

目录

一、完整报错

二、原因

三、其他


一、完整报错

Error while processing statement: FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask

二、原因

大概率是因为没有开启允许动态分区或单次动态分区个数太小了。

sql 复制代码
-- 动态分区前先运行如下语句
set hive.exec.max.dynamic.partitions = 1000;
set hive.exec.max.dynamic.partitions.pernode = 1000;

三、其他

如果上面语句没有解决,可以看下yarn配置,考虑是否是语句占用内存超过配置最大内存等等。

相关推荐
动力 continue10 小时前
MySQL 基础篇 · SELECT 查询大
数据库·sql·mysql·select
先吃饱再说14 小时前
后端开发绕不开的 SQL:从建表、查询到索引优化,一篇讲透
数据库·后端·sql
fastjson_15 小时前
Hive 复杂数据类型
数据仓库·hive·hadoop
陈年老古董16 小时前
Shell 脚本编程基础完整学习笔记
linux·sql·mysql
冰暮流星17 小时前
MySQL 流程函数详解
数据库·sql·mysql
roman_日积跬步-终至千里18 小时前
量化投研中的缓慢变化维:从因子定义到回测可复现的底层逻辑
大数据·数据仓库·金融
起名真的太难了18 小时前
Mysql的数据类型,查询与备份操作
数据库·sql·mysql
hopsky20 小时前
《Hive性能调优实战》核心内容详细解读
数据仓库·hive·hadoop
circuitsosk1 天前
NL2SQL在工业级场景下的精度优化:Schema Linking + 动态Few-shot实战
人工智能·python·sql·大模型·nl2sql