sqoop安装部署教程

短命女 2023-10-13 19:14 62阅读 0赞

![企业微信截图\_16865733749322][16865733749322]

#### Sqoop的安装 ####

> 注意：在安装Sqoop之前要配置好本机的Java环境和Hadoop环境
> 
> 先把spoop的安装包 sqoop-1.4.7.bin\_\_hadoop-2.6.0.tar.gz 拷贝在系统目录下的 /root/softwares下面

##### 解压配置环境变量 #####

# 解压tar.gz包
    [root@qianfeng01 local] tar -zxvf /root/sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz -C /usr/local/
    
    #把Sqoop的安装路径修改为sqoop-1.4.7,方便以后配置和调用
    [root@qianfeng01 local]# mv  sqoop-1.4.7.bin__hadoop-2.6.0 sqoop-1.4.7
    [root@qianfeng01 sqoop-1.4.7]# vi /etc/profile
    # 追加内容如下:
    
    export SQOOP_HOME=/usr/local/sqoop-1.4.7
    export PATH=$PATH:$SQOOP_HOME/bin

##### 新建配置文件 #####

[root@qianfeng01 sqoop-1.4.7] mv ./conf/sqoop-env-template.sh ./conf/sqoop-env.sh

##### 修改配置文件 #####

配置文件：

[root@qianfeng01 sqoop-1.4.7]  vi ./conf/sqoop-env.sh

按照本系统实际安装的Hadoop系列目录配置好下面的路径:

export HADOOP_COMMON_HOME=/usr/local/hadoop-3.2.1
    export HADOOP_MAPRED_HOME=/usr/local/hadoop-3.2.1
    export HIVE_HOME=/usr/local/hive-3.1.2
    export ZOOCFGDIR=/usr/local/zookeeper-3.6.2

##### 拷贝MySql驱动 #####

因为我们现在通过JDBC让MySql和HDFS等进行数据的导入导出,所以我们先必须把JDBC的驱动包拷贝到`sqoop/lib`路径下,如下

[root@qianfeng01 sqoop-1.4.7] cp /root/mysql-connector-java-5.1.18.jar ./lib/

##### 验证安装 #####

#查看Sqoop的版本
    [root@qianfeng01 sqoop-1.4.7] sqoop version

[16865733749322]: https://img-blog.csdnimg.cn/img_convert/3828804907c272b6c86f6a29e151bb85.png

发表评论取消回复

表情：

评论列表（有 0 条评论，62人围观）

还没有评论，来说两句吧...

相关阅读

相关 sqoop部署

部署 1. 安装解压并做软链接 [hadoop@hadoop001 software]$ pwd /home/hadoop/software ...

Dear 丶/ 2024年04月17日 06:30/ 0 赞/ 79 阅读

相关 sqoop安装部署教程

![企业微信截图\_16865733749322][16865733749322] Sqoop的安装 > 注意：在安装Sqoop之前要配置好本机的Java环境和Hado

短命女/ 2023年10月13日 19:14/ 0 赞/ 63 阅读

相关 sqoop安装

文章目录 1. 上传安装包至虚拟机 2. 解压安装包到指定路径 3. 修改目录名 4. 配置环境变量

小灰灰/ 2023年09月26日 23:23/ 0 赞/ 123 阅读

相关 Sqoop安装与部署

Sqoop 安装与部署 -------------------- > 更多Hadoop组件配套安装与部署 > Hadoop：https://blog.csdn

今天药忘吃喽~/ 2023年06月15日 15:23/ 0 赞/ 26 阅读

相关 Sqoop 安装与部署

Sqoop 安装与部署 -------------------- > 更多Hadoop组件配套安装与部署 > Hadoop：https://blog.csdn

た入场券/ 2023年06月15日 11:25/ 0 赞/ 13 阅读

相关 Hadoop Hive Sqoop安装教程

文章目录前提条件 1 关闭防火墙&清空规则安装包说明 3 JDK安装 3.1 指定安装目录为/usr/java 3.

ゞ浴缸里的玫瑰/ 2023年02月22日 08:23/ 0 赞/ 31 阅读

相关 Sqoop安装教程

1、准备： sqoop的tar包：sqoop-1.4.6-cdh5.14.2.tar.gz 依赖jar包：java-json.jar、 mysql-connector

港控/mmm°/ 2022年12月04日 05:25/ 0 赞/ 173 阅读

相关大数据Sqoop系列之Sqoop1.x安装部署

1. 下载链接 [http://mirrors.shuosc.org/apache/sqoop/1.4.6/sqoop-1.4.6.bin\_\_hadoop-2.0.4

客官°小女子只卖身不卖艺/ 2022年06月04日 02:23/ 0 赞/ 216 阅读

相关 Sqoop简介及安装部署

简介： > Apache Sqoop是专为Apache Hadoop和结构化数据存储如关系数据库之间的数据转换工具的有效工具。你可以使用Sqoop从外部结构化数据存储的数据导

青旅半醒/ 2022年05月20日 20:42/ 0 赞/ 214 阅读

相关 sqoop安装

安装sqoop的前提是已经具备java和hadoop的环境 1、下载并解压最新版下载地址http://ftp.wayne.edu/apache/sqoop/1.4.6/

红太狼/ 2022年03月15日 11:12/ 0 赞/ 252 阅读