Sqoop1.4.5安装配置及演示.pdf
立即下载
撩心
2025-03-21
配置
SQOO
数据
P
变量
导入
Sqoop
环境
测试
安装
108.7 KB
Sqoop是一个用来将Hadoop（Hive、HBase）和关系型数据库中的数据相互转移的工具，可以将一个关系型
数据库（例 如：MySQL ,Oracle ,Postgres等）中的数据导入到Hadoop的HDFS中，也可以将HDFS的数据导入
到关系型数据库中。
Sqoop目前已经是Apache的顶级项目了，目前版本是1.4.5 和 Sqoop2 1.99.4，本文以1.4.5的版本为例讲解基
本的安装配置和简单应用的演示。
安装配置
准备测试数据
导入数据到HDFS
导入数据到Hive
导入数据到HBase
[一]、安装配置
选择Sqoop 1.4.5 版本：sqoop-1.4.5.bin__hadoop-2.0.4-alpha.tar.gz
1.1、下载后解压配置：
1.2、环境变量配置 vi ~/.bash_profile ：
1.3、配置Sqoop参数：
复制/conf/sqoop-env-template.sh 一份重命名为：/conf/sqoop-env.sh
vi /conf/sqoop-env.sh
补充：因为我当前用户的默认环境变量中已经配置了相关变量，故该配置文件无需再修改：
1.4、驱动jar包
下面测试演示以MySQL为例，则需要把mysql对应的驱动lib文件copy到 /lib 目录下。
[二]、测试数据准备
1 tar -zxvf sqoop-1.4.5.bin__hadoop-2.0.4-alpha.tar.gz /hadoop/
2 cd /hadoop/
3 ln -s sqoop-1.4.5.bin__hadoop-2.0.4-alpha sqoop
1 #Sqoop add by micmiu.com
2 export SQOOP_HOME=/hadoop/sqoop
3 export PATH=$SQOOP_HOME/bin:$PATH
1 # 指定各环境变量的实际配置
2 # Set Hadoop-specific environment variables here.
3
4 #Set path to where bin/hadoop is availab
配置/SQOO/数据/P_HOME/变量/导入/Sqoop/环境/测试/安装/
配置/SQOO/数据/P_HOME/变量/导入/Sqoop/环境/测试/安装/
