本篇将在
阿里云ECS服务器部署HADOOP集群（一）：Hadoop完全分布式集群环境搭建
阿里云ECS服务器部署HADOOP集群（二）：HBase完全分布式集群搭建（使用外置ZooKeeper)
阿里云ECS服务器部署HADOOP集群（三）：ZooKeeper 完全分布式集群搭建
阿里云ECS服务器部署HADOOP集群（四）：Hive本地模式的安装
的基础上搭建。
1 环境介绍
- 一台阿里云ECS服务器：master
- 操作系统：CentOS 7.3
- Hadoop：hadoop-2.7.3.tar.gz
- Java: jdk-8u77-linux-x64.tar.gz
- HBase: hbase-1.2.6-bin.tar.gz
- ZooKeeper: zookeeper-3.4.14.tar.gz
- Hive：apache-hive-2.3.6-bin.tar.gz
- Mysql: Mysql 5.7
- MySQL Connector-J：mysql-connector-java-5.1.47.tar.gz
- Sqoop: sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz
2 Sqoop 下载
下载 sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz 并在合适的位置解压缩，笔者这里解压缩的路径为:
/usr/local
将解压得到的目录改名为 sqoop
cd /usr/local
mv sqoop-1.4.7.bin__hadoop-2.6.0/ sqoop/
3 添加 Sqoop 环境变量
在"/etc/profile"中添加内容：
export SQOOP_HOME=/usr/local/sqoop
export PATH=$PATH:$SQOOP_HOME/bin
export CLASSPATH=$CLASSPTH:$SQOOP_HOME/lib
重新加载环境：
source /etc/profile
4 修改 Sqoop 环境变量
cd $SQOOP_HOME/conf/
cp sqoop-env-template.sh sqoop-env.sh
vim sqoop-env.sh
配置可参考如下代码：
#Set path to where bin/hadoop is available
export HADOOP_COMMON_HOME=/usr/local/hadoop #Set path to where hadoop-*-core.jar is available
export HADOOP_MAPRED_HOME=/usr/local/hadoop #set the path to where bin/hbase is available
export HBASE_HOME=/usr/local/hbase #Set the path to where bin/hive is available
export HIVE_HOME=/usr/local/hive #配置ZooKeeper的路径。如果读者没有配置 ZooKeeper 则不需要配置。
#Set the path for where zookeper config dir is
export ZOOCFGDIR=/usr/local/zookeeper
5 配置 MySQL 连接器
5.1 下载 mysql-connector-java-5.1.47.tar.gz 并解压至 $SQOOP_HOME/lib 下
tar -zxvf mysql-connector-java-5.1.47.tar.gz -C $HIVE_HOME/lib
5.2 测试与 Mysql 的连接
首先确保 mysql 服务已经启动，如果没有启动，执行以下命令
service mysql start
测试连接
sqoop list-databases --connect jdbc:mysql://localhost:3306/ --username root -P
连接成功后显示内容如图所示
6 安装完成
阿里云ECS服务器部署HADOOP集群系列：