Sqoop安装配置

Sqoop安装配置

Sqoop安装配置

• • 1.1 启动ZK集群及Hadoop集群
  • 1.2安装sqoop
  • 1.3重命名sqoop
  • 1.4配置sqoop环境变量
  • 1.5复制mysql的驱动文件
  • • 1.5.1进入connector
  • 1.6修改Sqoop的文件配置
  • • 1.6.1 重命名sqoop环境文件
    • 1.6.2修改sqoop-env.sh文件
  • 1.7查看sqoop版本信息

1.1 启动ZK集群及Hadoop集群

zkServer.sh start
start-dfs.sh
start-yarn.sh

1.2安装sqoop

tar -zxvf sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz -C /usr/project/

1.3重命名sqoop

cd /usr/project/
mv sqoop-1.4.7.bin__hadoop-2.6.0/ sqoop

1.4配置sqoop环境变量

vi /etc/profile

在末尾添加如下内容

#sqoop
export SQOOP_HOME=/usr/project/sqoop
export PATH=$PATH:$SQOOP_HOME/bin

使环境变量生效

**注意以下两个命令意思相同
. /etc/profile
source /etc/profile

1.5复制mysql的驱动文件

家目录下cd Hive/

**注意：驱动文件在之前安装Hive的安装包文件下

1.5.1进入connector

cd mysql-connector-java-5.1.49/

将红框中的文件复制到$HIVE_HOME/lib下：

cp mysql-connector-java-5.1.49-bin.jar /usr/project/sqoop/lib/

*注意：要去检查一下上面这个文件是否复制过去！！

1.6修改Sqoop的文件配置 1.6.1 重命名sqoop环境文件

cd /usr/project/sqoop/conf
mv sqoop-env-template.sh sqoop-env.sh

1.6.2修改sqoop-env.sh文件

vi sqoop-env.sh

找到文件内如下几行内容

#export HADOOP_COMMON_HOME=
#export HADOOP_MAPRED_HOME=
#export Hbase_HOME=
#export HIVE_HOME=
#export ZOOCFGDIR=

将其替换成如下内容

#export HADOOP_COMMON_HOME=/usr/project/hadoop-2.7.3
#export HADOOP_MAPRED_HOME=/usr/project/hadoop-2.7.3
#export Hbase_HOME=/usr/project/hbase
#export HIVE_HOME=/usr/project/hive
#export ZOOCFGDIR=/usr/project/zookeeper/conf

1.7查看sqoop版本信息

出现Sqoop 1.4.7表明Sqoop安装成功！！！