【HBase分布式数据库】第七章 数据的导入导出 importtsv导入数据

第七章 数据的导入导出

7.1 importtsv导入数据

任务目的

掌握导入tsv数据的方法

掌握导入csv数据的方法

任务清单

任务1:导入tsv数据

任务2:导入csv数据

任务步骤

任务1:导入tsv数据

1、创建测试表

进入hbase的shell环境,创建测试命名空间ns和测试表table_tsv。

shell 复制代码
bin/hbase shell
create_namespace 'ns'
create 'ns:table_tsv','info','more'

8.1-1

2、查看准备的测试数据

在hbase主目录下的testdata目录下,已备好了测试数据,了解该数据。

shell 复制代码
cat testdata/tsvdata.txt

8.1-2

3、上传数据到HDFS

HDFS上创建目录,把测试数据上传到该目录并查看。

shell 复制代码
hadoop fs -mkdir -p /data/input
hadoop fs -put testdata/tsvdata.txt /data/input
hadoop fs -cat /data/input/tsvdata.txt

8.1-3

4、查看如何导入

通过如下指令查看导入的帮助说明。

shell 复制代码
hadoop jar $HBASE_HOME/lib/hbase-server-1.4.10.jar

8.1-4

5、继续查看

选择importtsv ,继续查看下一步。

shell 复制代码
hadoop jar $HBASE_HOME/lib/hbase-server-1.4.10.jar importtsv

8.1-5

6、书写语句

按照格式书写语句。Dimporttsv.columns=rowkey,列族:列名,列族:列名... 分别对应输入数据按照 \t 分割的数据。并等待MR执行完毕。

shell 复制代码
hadoop jar $HBASE_HOME/lib/hbase-server-1.4.10.jar importtsv  
-Dimporttsv.columns=HBASE_ROW_KEY,info:name,more:location,more:age 
            ns:table_tsv /data/input/tsvdata.txt

7、查看数据

重新进入shell环境,查看数据。

shell 复制代码
bin/hbase shell
scan 'ns:table_tsv'

8.1-6

任务2:导入csv数据

1、创建测试表

创建测试表table_csv。

shell 复制代码
create 'ns:table_csv','info','more'

8.1-7

2、查看准备的测试数据

shell 复制代码
cat testdata/csvdata.txt

8.1-8

3、上传数据到HDFS

shell 复制代码
hadoop fs -put testdata/csvdata.txt /data/input

8.1-9

4、导入数据

使用importtsv导入数据。此处需要添加分隔符的语法。

shell 复制代码
hadoop jar $HBASE_HOME/lib/hbase-server-1.4.10.jar importtsv 
-Dimporttsv.separator=',' 
-Dimporttsv.columns=HBASE_ROW_KEY,info:name,more:location,more:age 
            ns:table_csv /data/input/csvdata.txt

5、查看数据

进入shell环境,查看数据。

shell 复制代码
scan 'ns:table_csv'

8.1-10

相关推荐
codeejun1 小时前
每日一Go·MySQL-17、分页优化方案
数据库·mysql
CoderYanger1 小时前
Java EE 进阶:9.MyBatis 操作数据库(进阶)(第四弹):图书管理系统(用户登录+添加图书)
java·数据库·spring boot·mysql·面试·java-ee·mybatis
Decay__1 小时前
附 - 02・SQLServer 分库分表与中间件 —— 原生分区表、横向分库实践与联邦查询
运维·数据库·sql·mysql·架构
牧瀬クリスだ1 小时前
从零手写博客系统:分层架构与统一响应(一)
java·数据库·架构·mybatis·springboot·安全架构
the局外人1 小时前
Python 实战检索优化:BM25、向量与重排
数据库·后端·python
得物技术2 小时前
从研发经验到团队知识:Akashic知识工程实践|得物技术
数据库·程序员·架构
ClouGence2 小时前
开源数据库管理工具 CloudDM 发布新版本,支持 GreptimeDB 数据源
数据库·kafka
wno7043 小时前
Centos下PostgreSQL安装部署详细步骤
java·数据库·spring boot
文丑颜不良啊3 小时前
InnoDB 和 MyISAM
数据库
ShineWinsu4 小时前
对于Qt:QVBoxLayout常见属性以及方法的解析
开发语言·数据库·c++·qt·gui·客户端·布局管理器