1.环境准备

1.1软件版本

sqoop-1.4.5 下载地址

2.配置

sqoop的配置比较简单，下面给出需要配置的文件

2.1环境变量

sudo vi /etc/profile

SQOOP_HOME=/home/hadoop/source/sqoop-1.4.5PATH=$SQOOP_HOME/binexport SQOOP_HOME

2.2sqoop-env.sh

#Set path to where bin/hadoop is availableexport HADOOP_COMMON_HOME=/home/hadoop/source/hadoop-2.5.1#Set path to where hadoop-*-core.jar is availableexport HADOOP_MAPRED_HOME=/home/hadoop/source/hadoop-2.5.1#set the path to where bin/hbase is available#export HBASE_HOME=#Set the path to where bin/hive is availableexport HIVE_HOME=/home/hadoop/source/hive-0.14.0#Set the path for where zookeper config dir is#export ZOOCFGDIR=

注：目前我是木有配置HBase和Zookeeper的，若有需要的人可以将路径直接指定到HBase和Zookeeper的安装路径下。

2.3异常

Streaming result set com.mysql.jdbc.RowDataDynamic@12e9d40f is still active

执行sqoop脚本时，出现这个异常是因为mysql的驱动的原因，使用最新的mysql驱动包。

解决方案：

wget http://dev.mysql.com/get/Downloads/Connector-J/mysql-connector-java-5.1.32.tar.gz

然后解压到sqoop目录的lib目录下，重新执行脚本正常。

至此，sqoop的安装配置以及使用到此完成。

联系方式：

QQ群（董的博客）：306184597

邮箱：810371213@qq.com

SQOOP安装部署

声明：以上内容来自用户投稿及互联网公开渠道收集整理发布，本网站不拥有所有权，未作人工编辑处理，也不承担相关法律责任，若内容有误或涉及侵权可进行投诉：投诉/举报工作人员会在5个工作日内联系你，一经查实，本站将立刻删除涉嫌侵权内容。

联系
我们

首页 > 代码库 > SQOOP安装部署