Sqoop_1.4.6安装配置

限时加码!20+主流AI编程工具免费用 购周边加赠Coding Plan Lite,Claude Code、Cursor等即刻畅享,学习进阶更高效! 阅读详情


安装前需先安装配置Hadoop,可参考文章:Hadoop_2.7.2安装配置

1、下载安装包
方式一、官网下载 :http://sqoop.apache.org
方式二、CSDN资源快速下载 :快速下载Sqoop安装包

2、上传压缩包
将压缩包上传到/usr/local/software/

3、解压到/usr/local目录下
tar -zxvf sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz -C /usr/local/

4、修改文件名称
mv sqoop-1.4.6.bin__hadoop-2.0.4-alpha sqoop-1.4.6

5、创建配置文件
在sqoop/conf目录下复制一份env.sh文件
cp sqoop-env-template.sh sqoop-env.sh

6、修改配置文件
在sqoop-env.sh中添加以下内容:

export HADOOP_COMMON_HOME=/usr/local/hadoop-2.7.2
export HADOOP_MAPRED_HOME=/usr/local/hadoop-2.7.2
export HIVE_HOME=/usr/local/hive

7、添加JDBC驱动
将mysql中的JDBC驱动jar包拷贝到sqoop安装目录的lib文件夹下
驱动jar包下载地址:https://download.csdn.net/download/mcajax/12149487
(下载后解压即可得到mysql驱动jar包)

8、添加环境变量
在/etc/profile中添加以下内容:

#sqoop
export SQOOP_HOME=/usr/local/sqoop-1.4.6
export PATH=$PATH:$SQOOP_HOME/bin

9、查看安装结果
执行命令:
sqoop list-databases --connect jdbc:mysql://bigdata102:3306/ --username root --password 123456

如果显示数据库列表则安装成功

sqoop-1.4.6.jar.zip sqoop框架开发工具使用的jar sqoop-1.4.6.jar 手动安装到maven org.apache.sqoop sqoop 1.4.6 立即下载

相关推荐

sqoop-1.4.6.bin-hadoop-2.0.4-alpha版本的压缩包,直接下载到本地,解压后即可使用

Sqoop(发音:skup)是一款开源的工具,主要用于在Hadoop(Hive)与传统的数据库(mysql、postgresql...)间进行数据的传递,可以将一个关系型数据库(例如 : MySQL ,Oracle ,Postgres等)中的数据导进到Hadoop的HDFS中,也可以将HDFS的数据导进到关系型数据库中。 Sqoop项目开始于2009年,最早是作为Hadoop的一个第三方模块存在,后来为了让使用者能够快速部署,也为了让开发人员能够更快速的迭代开发,Sqoop独立成为一个Apache项目。sqoop是什么? sqoop是个传输数据的工具。 本质:就是讲sqoop语句转换成mapreduce。Sqoop是一个在结构化数据和Hadoop之间进行批量数据迁移的工具,结构化数据可以是MySQL、Oracle等RDBMS。Apache框架Hadoop是一个越来越通用的分布式计算环境,主要用来处理大数据。随着云提供商利用这个框架,更多的用户将数据集在Hadoop和传统数据库之间转移,能够帮助数据传输的工具变得更加重要。Apache Sqoop就是这样一款工具,可以在Hadoop和关系

SQOOP 1.4.6 安装

2、 将压缩包放入“/vdb/data/” 自定义目录下,解压tar -zxvf sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz。1、 由于使用的是hadoop2.7,所以下载sqoop版本为:sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz。7.到目录 /vdb/data/sqoop/sqoop-1.4.6/conf 下执行命令。9.验证获取MySql数据库databases命令。3、 将解压后的目录改为:sqoop-1.4.6

wawzc1s13的专栏 521

Elsevier投稿实战:从ESWA模板到录用通知的全流程拆解

本文详细拆解了Elsevier旗下期刊ESWA(Expert Systems With Applications)的投稿全流程,从模板选择、投稿系统操作到审稿意见回复和录用后注意事项。重点分享了单栏LaTeX模板调整、APA文献格式处理、Highlights撰写技巧等实战经验,帮助研究者高效完成投稿并提升录用概率。

weixin_32715349的博客 173

Sqoop-1.4.6安装部署及详细使用介绍

之所以选择Sqoop1是因为Sqoop2目前问题太多。无法正常使用,综合比较后选择Sqoop1Sqoop1安装配置比较简单 一、安装部署 (1)、下载地址:http://archive.cloudera.com/cdh5/cdh/5/sqoop-1.4.6-cdh5.5.2.tar.gz 解压到/opt/cdh5/sqoop (2)、拷贝mysql的jdbc驱动包mysql-conn

dylanld的专栏 2万+

Sqoop1.4.6安装+使用

安装 1安装Sqoop的前提是已经具备Java和Hadoop的环境。 2、下载地址:http://mirrors.hust.edu.cn/apache/sqoop/1.4.6/ ,下载后上传到home目录下 3、解压sqoop安装包到指定目录 #解压 tar -xvf sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz -C /opt #进入到解...

qq_22049773的博客 646

Hadoop集群搭建之 Sqoop安装手册(1.4.6

没想到时隔一年多,hadoop安装的文章突然这么多人看到,既然有人看,那我近期就把其他的实验手册一块整理一下,传上来。链接:https://pan.baidu.com/s/1cBvMzxRMpjPN-sHqIftE4Q。/export/servers/sqoop-1.4.6/lib/目录下。今天主要介绍下sqoop 1.4.6安装,使用见下篇。可以成功查询到连接的mysql数据库中的所有数据库名。进入Sqoop解压目录下的conf目录,复制。文中提到的安装包如果找不到,可以通过我的。

小飞飞V5的博客 567

Sqoop-1.4.6的简要安装

准备 下载sqoop-1.4.6 下载地址:https://mirrors.tuna.tsinghua.edu.cn/apache/sqoop/1.4.6/ 这里,sqoop-1.4.6.tar.gz里面居然并没有sqoop-1.4.6.jar包,后期启动的时候会出现:运行sqoop错误,找不到或者无法加载主类org.apache.sqoop.sqoop这个错误,而在

清风恋歌的博客 832

Sqoop1.4.6 安装配置

.安装环境 操作系统版本:CentOS Liunx release 7.2.1511 (Core) JDK版本:jdk1.8.0_65 Hadoop版本:hadoop-2.6.4 Sqoop版本:sqoop-1.4.6.bin__hadoop-2.0....

chongweican1283的博客 159

cdh sqoop 配置_Sqoop-1.4.6安装部署及详细使用介绍

之所以选择Sqoop1是因为Sqoop2目前问题太多。无法正常使用,综合比较后选择Sqoop1Sqoop1安装配置比较简单一、安装部署(1)、下载安装包解压到/home/duanxz/sqooptar -zxvfsqoop-1.4.6-cdh5.5.2.tar.gz(2)、拷贝mysql的jdbc驱动包mysql-connector-java-5.1.31-bin.jar到sqoop/lib目...

weixin_39624429的博客 402

Sqoop-1.4.6安装配置

准备工作 1.搭建好的hadoop分布式系统 2.mysql-connector-java-5.1.43-bin.jar和sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz安装安装 解压sqoop安装包实现sqoop安装 #tar -zxvf sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz -C /u

独者looc 786

sqoop-1.4.6安装配置

前沿centos 7jdk1.8.0hadoop-2.7.3hbase-1.3.1hive-2.1.1zookeeper-3.4.9Mysql-5...Sqoop-1.4.6解压[hadoop@master local]$ tar -zxvf ./app/sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz -C ./soft/进入/usr/local/soft/重...

会飞的猪的 博客 704

sqoop1.4.6安装配置

一、环境与软件 操作系统:Red Hat 4.8.3-9 Apache hadoop: 2.7.2 Apache Zookeeper:3.4.9 Apache Sqoop1.4.6 mysql JDBC:5.1.4 1、登录 linux 81,拥有root权限 2、cd /opt 3、下载sqoop 的包   wget   4、tar -z

ivan的专栏 855

sqoop1.4.6配置安装

1、下载sqoop1.4.6 2、配置环境变量。 3、复制sqoop/conf/sqoop-env-template.sh为sqoop-env.sh 添加相关的配置 #Setpath to where bin/Hadoopis available exportHADOOP_COMMON_HOME=/opt/cdh5/hadoop #Setpath to where hadoop-*-...

weixin_30616969的博客 150

cdh sqoop 配置_Sqoop 1.4.6 安装配置关联Hadoop Hive Zookeeper

系统环境组件版本nameversionSqoop1.4.6Sqoop安装解压懒的敲了配置环境变量# SQOOPSQOOP_HOME=/home/Hadoop/development/src/sqoop-1.4.6-cdh5.6.0PATH=$PATH:$SQOOP_HOME/binexport PATHcd 到Sqoop根目录配置Sqoop核心文件主要配置${SQOOP_HOME}/conf/sq...

weixin_30173361的博客 363

sqoop-1.4.6 安装配置

1.环境信息 [hadoop@master sqoop-1.4.6]$ cat /etc/redhat-release CentOS Linux release 7.1.1503 (Core) [hadoop@master sqoop-1.4.6]$ [hadoop@master sqoop-1.4.6]$ mysql --version mysql Ver 14.14 Distrib

let it go的博客 537

centos7安装配置sqoop1.4.6

1.下载sqoop1.4.6安装包 wget http://archive.apache.org/dist/sqoop/1.4.6/sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz 2.解压安装包 tar -zxvf sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz -C /opt/bigdata 3.修改解压得到的文件夹名称以方便后续操作 cd /opt/bigdata mv sqoop-1.4.6.bin__hadoop-2.0

qq_36912167的博客 422

Sqoop 1.4.6 安装配置关联hadoop Hive Zookeeper

系统环境CentOS 6.5组件版本 name version Sqoop 1.4.6 Sqoop安装解压 懒的敲了配置环境变量 # SQOOP SQOOP_HOME=/home/hadoop/development/src/sqoop-1.4.6-cdh5.6.0 PATH=$PATH:$SQOOP_HOME/bin export PATHcd 到Sqoop根目录 配置Sqoop

ZeroTeam_麒麟 1693

sqoop1.4.6 安装配置

2019独角兽企业重金招聘Python工程师标准>>> ...

weixin_33828101的博客 87
上一篇: Tez_0.9.1安装配置
下一篇: Notepad++快捷键(精简版)
剁椒鱼不要头
博客等级 码龄10年 31粉丝 56原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值