hive 动态分区参数设置错误导致数据不稳定

hive 动态分区参数设置错误导致数据不稳定

• 现象
• 原因
• 解决思路

现象

昨天下班前同事遇到个问题来问我，sap的一个dwr模型数据有时候正常有时候异常，看了调度作业日志都正常，也是在上游dwi跑完以后再执行的。

上游dwi是1点多刷新的数据，dwr是3点多才开始。

为啥他手动跑一下又正常了？？

原因

set hive.exec.dynamic.partition = ture;

英语没那么敏感的同学，是没那么容易发现 true 和 ture 的区别，所以当同事知道原因以后的反应是：这么坑爹！

解决思路

把 ture 改成 true 应该就可以了。（后续待更新处理结果）