Sqoop 的安装与配置

夏木夕2024-04-03 10:32

1 下载并解压

（1）上传安装包 sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz 到 hadoop101 的 /opt/software 路径中

（2）解压sqoop安装包到指定目录，并对其重命名

powershell 复制代码

[huwei@hadoop101 software]$ tar -zxf sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz -C /opt/module/
[huwei@hadoop101 software]$ cd /opt/module/
[huwei@hadoop101 module]$ mv sqoop-1.4.6.bin__hadoop-2.0.4-alpha/ sqoop-1.4.6

2 修改配置文件

进入到/opt/module/sqoop/conf目录，重命名配置文件

powershell 复制代码

[huwei@hadoop101 module]$ cd sqoop-1.4.6/conf/
[huwei@hadoop101 conf]$ mv sqoop-env-template.sh sqoop-env.sh

修改配置文件

powershell 复制代码

[huwei@hadoop101 conf]$ vim sqoop-env.sh

增加如下内容

powershell 复制代码

export HADOOP_COMMON_HOME=/opt/module/hadoop-3.1.3
export HADOOP_MAPRED_HOME=/opt/module/hadoop-3.1.3
export HIVE_HOME=/opt/module/hive-3.1.2
export ZOOKEEPER_HOME=/opt/module/zookeeper-3.5.7
export ZOOCFGDIR=/opt/module/zookeeper-3.5.7/conf

3 添加环境变量

powershell 复制代码

[huwei@hadoop101 sqoop-1.4.6]$ sudo vim /etc/profile.d/my_env.sh

powershell 复制代码

# SQOOP_HOME
export SQOOP_HOME=/opt/module/sqoop-1.4.6
export PATH=$PATH:$SQOOP_HOME/bin

使得环境变量生效

powershell 复制代码

[huwei@hadoop101 sqoop-1.4.6]$ source /etc/profile

4 拷贝 JDBC 驱动

（1）将 mysql-connector-java-5.1.48.jar 上传到 /opt/software 路径

（2）进入到/opt/software/路径，拷贝 jdbc 驱动到 sqoop 的 lib 目录下。

5 测试Sqoop是否能够成功连接数据库

powershell 复制代码

[huwei@hadoop101 bin]$ sqoop list-databases --connect jdbc:mysql://hadoop101:3306/ --username root --password root

出现已有的数据库名称