安装环境:
sqoop版本:1.4.6
Hadoop:2.7.2
MysqL:5.7.15
注意:sqoop1与sqoop2完全不兼容,1.4.6及之前的版本是sqoop1,之后的是sqoop2
1. 下载并解压sqoop1.4.6
sqoop下载地址
tar -zxvf sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz -C /usr/local #解压安装文件
cd /usr/local
sudo mv sqoop-1.4.6.bin__hadoop-2.0.4-alpha sqoop #修改文件名
sudo chown -R dblab:dblab sqoop #修改文件夹属主
cd sqoop/conf/
cat sqoop-env-template.sh >> sqoop-env.sh #将sqoop-env-template.sh复制一份并命名为sqoop-env.sh
vi sqoop-env.sh #编辑sqoop-env.sh
修改sqoop-env.sh的如下信息
export HADOOP_COMMON_HOME=/usr/local/hadoop
export HADOOP_MAPRED_HOME=/usr/local/hadoop
export HBASE_HOME=/usr/local/hbase
export HIVE_HOME=/usr/local/hive
#export ZOOCFGDIR= #如果读者配置了ZooKeeper,也需要在此配置ZooKeeper的路径
- 配置环境变量
vi ~/.bashrc
在配置文件第一行键入如下信息:
export SQOOP_HOME=/usr/local/sqoop
export PATH=$PATH:$SBT_HOME/bin:$SQOOP_HOME/bin
export CLASSPATH=$CLASSPATH:$SQOOP_HOME/lib
保存退出后source ~/.bashrc
使配置文件生效
4. 将MysqL驱动包拷贝到$SQOOP_HOME/lib
mysql驱动包下载地址
cd ~/Downloads #切换到下载路径
tar -zxvf MysqL-connector-java-5.1.40.tar.gz #解压MysqL驱动包
mv MysqL-connector-java-5.1.40.tar.gz MysqL #重命名文件夹名称
可以在文件系统图形化界面拷贝,也可以用如下命令拷贝:
cd MysqL/
cp MysqL-connector-java-5.1.40-bin.jar /usr/local/sqoop/lib
- 测试与MysqL的连接
首先请确保MysqL服务已经启动了service MysqL start
sqoop list-databases --connect jdbc:MysqL://127.0.0.1:3306/ --username root -P