CentOS7 Sqoop 1.4.7 安装 (Hadoop 3.3.0)

CentOS7 Sqoop 1.4.7 安装 (Hadoop 3.3.0)

1、 Sqoop 1.4.7 官网链接下载：

https://archive.apache.org/dist/sqoop/1.4.7/

2、把压缩包用mobaxterm拖到 /tools文件夹

3、解压

1. tar -zvxf /tools/sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz -C /training/

复制代码

4、进入 /training 文件夹

1. cd /training

复制代码

5、重命名文件夹

1. mv sqoop-1.4.7.bin__hadoop-2.6.0 sqoop-1.4.7

复制代码

6、查察一下重命名乐成没，可以看到改名为sqoop-1.4.7了

1. ll

复制代码

7、编辑情况变量

1. vi ~/.bash_profile

复制代码

1）加进去这个

1. #sqoop
2. export SQOOP_HOME=/training/sqoop-1.4.7
3. export PATH=$PATH:$SQOOP_HOME/bin

复制代码

2）按esc按钮后 :wq 保存并退出文件
3）生效情况变量

1. source ~/.bash_profile

复制代码

8、Sqoop设置

1）进去设置文件路径

1. cd /training
2. /sqoop-1.4.7/conf

复制代码

2）复制一份

1. cp sqoop-env-template.sh sqoop-env.sh

复制代码

3）更改文件sqoop-env.sh

1. vi sqoop-env.sh

复制代码

4）看清楚本身的路径是啥，把以下加进去并更改

1. export HADOOP_COMMON_HOME=/training/hadoop-3.3.0
2. export HADOOP_MAPRED_HOME=/training/hadoop-3.3.0
3. export HIVE_HOME=/training/hive

复制代码

5）加入mysql的jdbc驱动包到sqoop的lib文件夹
链接：https://pan.baidu.com/s/1gD2M8Gr9IFOkOA4EghfWLg?pwd=32r8

9、检查是否可用

1）sqoop版本号查询

1. sqoop version

复制代码

2）sqoop帮助查询

1. sqoop-help

复制代码

10、测试sqoop链接Linux Mysql

1. sqoop list-databases --connect jdbc:mysql://192.168.163.137:3306/ --username root --password Root123!

复制代码

可能报错：

   Exception in thread “main” java.lang.NoClassDefFoundError:
org/apache/commons/lang/StringUtils

  a）原因：

找不到类，sqoop版本是1.4.7 而commons-lang3-3.4.jar版本是3.x
b）办理办法：

办理版本问题即可，commons-lang版本改为2.x
c）点击下载百度网盘链接：

commons-lang-2.6.jar
d）替换版本的commons-lang的jar包,将2.x版本的jar复制到sqoop的lib目次下,并删除3.x版本。

e）再尝试就可以了

1. sqoop list-databases --connect jdbc:mysql://192.168.163.137:3306/ --username root --password Root123!

复制代码

11、测试sqoop链接Windows Mysql

1. sqoop list-databases --connect jdbc:mysql://192.168.163.1 --username root --password Root123!

复制代码

免责声明：如果侵犯了您的权益，请联系站长，我们会及时删除侵权内容，谢谢合作！更多信息从访问主页：qidao123.com:ToB企服之家，中国第一个企服评测及商务社交产业平台。