一、目的
在用Flume采集Kafka中的数据直接写入Hive的ODS层静态分区表后，需要刷新表，才能导入分区和数据。原因很简单，就是Hive表缺乏分区的元数据
二、实施步骤
（一）问题------在Flume采集Kafka中的数据写入HDFS后，如果不刷新表，则没有分区和表数据
（二）解决方法------Hive刷新分区MSCK
hive> MSCK REPAIR TABLE ods_queue2;
（三）刷新表后查看分区和表数据
一百九十、Hive——Hive刷新分区MSCK REPAIR TABLE
天地风雷水火山泽2023-10-18 23:35
相关推荐
ZCBUS实时计算11 小时前
政务海量分库分表汇聚实战：基于 3 节点 ZCBUS 集群完成医保 10TB 数据实时整合William Dawson1 天前
【踩坑实录｜Hive1\.2\.1数据服务接口5大疑难问题调试与全方位优化方案】hopsky2 天前
数据架构与商业智能ha_lydms2 天前
Hologres 简介APItesterCris3 天前
Open Claw 实战教程：5 分钟搭建京东商品自动化监控与数据分析系统Francek Chen5 天前
【大数据处理与分析】实验5：MapReduce初级编程实践RestCloud6 天前
ETL、ELT、CDC区别详解,2026数据集成模式选型指南与落地实战江晓鱼未暖6 天前
十七、Redis 核心原理与架构详解l1t6 天前
DeepSeek总结的上下文理应归属于数据仓库牛奶咖啡139 天前
大数据Hadoop运维应用实践——HIVE与Hadoop实现整合_Hive的配置安装与使用