2.7.2 hadoop体系之离线计算-sqoop数据迁移工具-sqoop安装

谁践踏了优雅 2022-12-24 07:58 258阅读 0赞

**目录**

1.下载并解压

2.修改配置文件

3.加入额外的依赖包

4.验证启动

--------------------

安装sqoop的前提是已经具备了java和hadoop的环境。

# 1.下载并解压 #

下载地址 http://archive.apache.org/dist/sqoop/1.4.7

sqoop1版本详细下载地址 http://archive.apache.org/dist/sqoop/1.4.7/sqoop-1.4.7.bin\_\_hadoop-2.6.0.tar.gz

sqoop2版本详细下载地址 http://archive.apache.org/dist/sqoop/1.99.6/sqoop-1.99.6-bin-hadoop200.tar.gz

我们这里使用sqoop1的版本，下载之后上传到/export/softwares目录下，然后进行解压

cd /export/softwares
    
    tar -zxvf sqoop-1.4.6-cdh5.14.0.tar.gz -C ../servers/

# 2.修改配置文件 #

cd /export/servers/hadoop‐3.1.1/conf/
    cp sqoop‐env‐template.sh sqoop‐env.sh
    vim sqoop‐env.sh

export HADOOP_COMMON_HOME/export/servers/hadoop‐3.1.1
    export HADOOP_MAPRED_HOME=/export/servers/hadoop‐3.1.1
    export HIVE_HOME=/export/servers/apache‐hive‐3.1.1‐bin

# 3.加入额外的依赖包 #

sqoop的使用需要添加两个额外的依赖包，一个是mysql的驱动包，一个是java-json的的 依赖包，不然就会报错

*  mysql-connector-java-5.1.40.jar
 *  java-json.jar

将这个两个jar包添加到sqoop的lib目录下

# 4.验证启动 #

cd /export/servers/sqoop-1.4.7.bin__hadoop-2.6.0
    bin/sqoop-version

![watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1N1eWViaXViaXU_size_16_color_FFFFFF_t_70][]

[watermark_type_ZmFuZ3poZW5naGVpdGk_shadow_10_text_aHR0cHM6Ly9ibG9nLmNzZG4ubmV0L1N1eWViaXViaXU_size_16_color_FFFFFF_t_70]: /images/20221120/5dbf1993162f4562905e83c3af768645.png

发表评论取消回复

表情：

评论列表（有 0 条评论，258人围观）

还没有评论，来说两句吧...

相关阅读

相关 Hadoop sqoop数据导入导出工具安装

进入sqoop的conf目录，将sqoop-site-template.xml文件重命名为sqoop-site.xml，并修改如下内容： ![在这里插入图片描述][wate

古城微笑少年丶/ 2023年10月07日 10:49/ 0 赞/ 16 阅读

相关 2.7.3 hadoop体系之离线计算-sqoop数据迁移工具-sqoop实战（导入+导出）

目录 1.Sqoop的数据导入 1.1 查看关系型数据数据库的信息 1.2 导入数据库表中数据到HDFS 1.3 导入数据库表中数据到hdfs指定目录 1.4 导入数

小灰灰/ 2022年12月24日 07:58/ 0 赞/ 149 阅读

相关 2.7.2 hadoop体系之离线计算-sqoop数据迁移工具-sqoop安装

目录 1.下载并解压 2.修改配置文件 3.加入额外的依赖包 4.验证启动 -------------------- 安装sqoop的前提是已经具备了java和ha

谁践踏了优雅/ 2022年12月24日 07:58/ 0 赞/ 259 阅读

相关 2.7.1 hadoop体系之离线计算-sqoop数据迁移工具-sqoop简介

目录 1.sqoop概述 2.sqoop1和sqoop2架构的对比 3.工作机制 -------------------- 1.sqoop概述 sqoop是ap

向右看齐/ 2022年12月24日 07:57/ 0 赞/ 162 阅读

相关 sqoop数据迁移

1 概述 sqoop是apache旗下一款“Hadoop和关系数据库服务器之间传送数据”的工具。导入数据：MySQL，Oracle导入数据到Hadoop的HDF

墨蓝/ 2022年11月21日 09:59/ 0 赞/ 253 阅读

相关 Sqoop数据迁移工具之简单介绍和安装（一）

1、概述 sqoop 是 apache 旗下一款“Hadoop 和关系数据库服务器之间传送数据”的工具。导入数据：MySQL，Oracle 导入数据到 Hado

逃离我推掉我的手/ 2022年05月10日 05:26/ 0 赞/ 254 阅读

相关数据迁移工具sqoop入门

\[b\]\[color=olive\]\[size=large\]首先，先简单说明下sqoop是什么，sqoop 即 SQL to Hadoop ，是一款方便的在传统型数据库

迷南。/ 2022年04月21日 14:22/ 0 赞/ 252 阅读

相关数据迁移框架sqoop

数据迁移框架sqoop 一、启动Hadoop集群并连接测试 1.1 查看并启动Zookeeper服务 ![在这里插入图片描述][20190606122143356

不念不忘少年蓝@/ 2022年01月22日 12:59/ 0 赞/ 407 阅读

相关 Sqoop---数据迁移工具

[https://blog.csdn.net/u012453843/article/details/52951120][https_blog.csdn.net_u0124538

妖狐艹你老母/ 2021年12月09日 05:55/ 0 赞/ 325 阅读

相关 Sqoop数据迁移工具

[Sqoop 官方文档][Sqoop] 目录 1. Sqoop 数据导入 1.1. 导入 MySQL 数据到 HDFS 1.1.1. 普通导入

悠悠/ 2021年09月23日 07:26/ 0 赞/ 448 阅读