hive-批量导出表结构,导入表结构

1、导出hive表结构

datastudio可以连接hive库,通过show databases 语句可以显示hive下建了多少数据库名。

使用use 数据库名,进入某个数据库下,通过show tables可显示该数据库下建了多少张表。

将所有库的表数据整理成库名.表名的形式放入txt中。

写shell脚本。读取txt内容。

#!/bin/bash

cat all_table.txt | while read eachline

do

hive -e "show create table ${eachline};" >> all_create_table.txt

done

将all_create_table.txt打开,批量将create table 替换成 ;create table ,如果建的是外部表,就需要将create external table 替换成 ; create external table。(因为导出的每个表后面并没有加分号,导入的数据,每个表的建表语句要以分号结尾)

2、导入hive表结构

将all_create_table.txt放入需要导入的服务器。

执行hive -f all_create_table.txt 即可。

相关推荐
菜鸟小码12 小时前
Hive数据模型、架构、表类型与优化策略
hive·hadoop·架构
AllData公司负责人17 小时前
AllData数据中台通过开源项目RustFS建设现代数据湖存储,接入工业, 医疗, 物联网数据,包括文件/图像/音频/视频数据!
数据库·数据仓库·物联网·开源·数据存储·数据接入·rustfs
IT从业者张某某17 小时前
基于Docker的hadoop容器安装hive并测试
hive·hadoop·docker
IT从业者张某某18 小时前
基于Docker的hadoop容器安装zookeeper
hadoop·docker·zookeeper
juniperhan19 小时前
Flink 系列第14篇:Flink Metrics 监控指标详解(生产环境版)
大数据·数据仓库·分布式·flink
菜鸟小码19 小时前
深入理解 Hive 数据模型
数据仓库·hive·hadoop
菜鸟小码20 小时前
Hive环境搭建与配置优化
数据仓库·hive·hadoop
看海的四叔1 天前
【SQL】SQL同环比计算的多种实现方式
数据库·hive·sql·mysql·数据分析·同环比
xiaogai_gai2 天前
金蝶云星空API接口的ETL转换与数据写入方案
数据仓库·etl
菜鸟小码2 天前
Hive数据类型全解析:从基础到复杂类型实战指南
数据仓库·hive·hadoop