Sqoop安装

Sqoop安装

1. 下载sqoop安装包（以1.4.7为例）

去官网找到sqoop下载界面，下载即可

https://mirrors.tuna.tsinghua.edu.cn/apache/sqoop/1.4.7/

2. 安装

在安装sqoop之前需要保证自己已经安装好了hadoop、jdk、hive、hbase、mysql等相关软件

将sqoop放在自己的文件目录下，我这里放在了/opt/software/下

解压到/opt/apps/目录下

[yangqi@xiaoer ~]$ tar -zvxf /opt/software/sqoop-1.4.7.tar.gz -C /opt/apps/

解压完成之后，可以考虑将文件夹的名字改为sqoop，这样配置环境变量就简单了很多

[yangqi@xiaoer apps]$ mv sqoop-1.4.7 sqoop

配置环境变量，建议配置在用户目录下，以免配置错误

[yangqi@xiaoer ~]$ vi ~/.base_profile

SQOOP_HOME=/opt/apps/sqoop
PATH=$SQOOP_HOME/bin:$PATH

export SQOOP_HOME PATH

使环境变量生效

[yangqi@xiaoer ~]$ source ~/.bash_profile

将sqoop目录下的conf目录下的sqoop-env.template.sh更名为sqoop-env.sh

并修改其中内容

[yangqi@xiaoer ~]$ cd /opt/apps/sqoop/conf/
[yangqi@xiaoer conf]$ mv sqoop-env.template.sh sqoop-env.sh
[yangqi@xiaoer conf]$ vi sqoop-env.sh

然后编辑sqoop-env.sh的内容

# hadoop的安装位置
export HADOOP_COMMON_HOME=/opt/apps/hadoop/
# hadoop的女装位置
export HADOOP_MAPRED_HOME=/opt/apps/hadoop/
# hbase的安装位置
export HBASE_HOME=/opt/apps/hbase/
# hive的安装位置
export HIVE_HOME=/opt/apps/hive/
# zookeeper的安装位置
export ZOOCFGDIR=/opt/apps/zookeeper/

将连接mysql的驱动jar包放到/sqoop/lib/目录下

3. 测试sqoop

查看sqoop的版本号和帮助信息

[yangqi@xiaoer ~]$ sqoop version
[yangqi@xiaoer ~]$ sqoop help

查看某一个命令的帮助信息

[yangqi@xiaoer ~]$ sqoop help list-databases

查看mysql数据库的信息

[yangqi@xiaoer ~]$ sqoop list-databases --connect jdbc:mysql://localhost:3306 --username root --password 123456

查看mysql数据库中指定库的表信息

[yangqi@xiaoer ~]$ sqoop list-tables --connect jdbc:mysql://localhost:3306/mysql --username root --password 123456