技术栈

一百九十、Hive——Hive刷新分区MSCK REPAIR TABLE

天地风雷水火山泽2023-10-18 23:35

一、目的

在用Flume采集Kafka中的数据直接写入Hive的ODS层静态分区表后,需要刷新表,才能导入分区和数据。原因很简单,就是Hive表缺乏分区的元数据

二、实施步骤

(一)问题------在Flume采集Kafka中的数据写入HDFS后,如果不刷新表,则没有分区和表数据

(二)解决方法------Hive刷新分区MSCK

hive> MSCK REPAIR TABLE ods_queue2;

(三)刷新表后查看分区和表数据

上一篇:Ruby 之 csv 文件读写
下一篇:AI爆文变现-写作项目-脚本配置教程-解放双手
相关推荐
weixin_30777913
4 小时前
C#实现Hive到Snowflake数据迁移
开发语言·数据仓库·hive·c#
beijingliushao
4 小时前
27-数据仓库与Apache Hive-2
数据仓库·hive·hadoop
Y.ppm
5 小时前
数据仓库知识
数据仓库
beijingliushao
5 小时前
31-数据仓库与Apache Hive-Insert插入数据
数据仓库·hive·apache
程序员小羊!
1 天前
Hadoop HDFS 3.3.4 讲解~
大数据·hadoop·hdfs
程序员小羊!
1 天前
Hadoop MapReduce 3.3.4 讲解~
大数据·hadoop·mapreduce
小戈爱学习
2 天前
CDP集群中通过Hive外部表迁移HBase数据的操作记录
hive·hadoop·hbase
随心............
2 天前
hive专题面试总结2
数据仓库·hive·hadoop
wyn20001128
3 天前
Hive学习笔记
hive·笔记·学习
beijingliushao
3 天前
26-数据仓库与Apache Hive
hive
热门推荐
01全球最强模型Grok4,国内已可免费使用!(附教程)02UV安装并设置国内源03Qwen3-Coder 快速上手教程 | Qwen Code + Claude Code042025年华数杯C题超详细解题思路05🚀Cursor CLI+GPT-5保姆级教程+编程能力测评!Cursor CLI零成本免费使用GPT-5!Claude Code的劲敌来了!从安装到实战演示06KGG转MP3工具|非KGM文件|解密音频07OpenAI重返开源!GPT-OSS本地部署完全指南08ChatGPT 5发布日期揭秘:2025年8月上线,多模态推理能力全面升级09Cursor 终端“卡死/无响应”问题的解法10腾讯还是太全面了,限时免费!超全CodeBuddy IDE保姆级教程!(附案例)