CentOS下sqoop1.4.4的安装

原创 2013年12月03日 22:21:22

1. 我的hadoop的版本是1.1.2,对应的sqoop是sqoop-1.4.4.bin__hadoop-1.0.0,sqoop-1.4.4.bin__hadoop-1.0.0的下载地址:

    http://www.apache.org/dyn/closer.cgi/sqoop/

    我选的是其中的ttp://mirrors.hust.edu.cn/apache/sqoop/,选择1.4.4版本下的sqoop-1.4.4.bin__hadoop-1.0.0.tar.gz

2. 解压sqoop安装文件,修改conf/sqoop-env.sh

#Set path to where bin/hadoop is available
export HADOOP_COMMON_HOME=/usr/hadoop-1.1.2/

#Set path to where hadoop-*-core.jar is available
export HADOOP_MAPRED_HOME=/usr/hadoop-1.1.2

#set the path to where bin/hbase is available
export HBASE_HOME=/usr/hbase-0.94.13

3. 复制sqoop-site-template.xml,命名为sqoop-site.xml,内容不变

4. 下载myql-connector-java-5.0.8.jar,放到@SQOOP_HOME/lib中

5. 下载并安装Mysql,在命令行中输入

    > yum install mysql

   mysql默认用户名是root,密码为空

  我安装完mysql后,在命令行中输入mysql -u root,报错了,后来网上查资料,输入如下命令:

     >service mysql start

     >mysql -u root 

   显示mysql启动成功

6. 从MySQL导入数据到HDFS

  在mysql中创建数据库,名为sqoop,旗下有个表叫student,表结构为id int,name text

  测试sqoop与mysql的连接:>bin/sqoop list-database --connect jdbc:mysql://localhost:3306/ --username root

  从mysql导入数据到HDFS:>sqoop import --connect jdbc:mysql://localhost:3306/ sqoop --usernaem root --table student -m 1

7. 在HDFS上查看数据是否导入

   >hadoop dfs -ls student

Sqoop1.4.4在Hadoop2.2.0集群上的安装

问题导读:         1、Sqoop在Hadoop与关系型数据库之间传输数据,需要修改哪个配置文件?         2、需要将对应的关系型数据库JDBC驱动包拷贝到哪个目录下? 一、Sqoop...
  • NIITYZU
  • NIITYZU
  • 2015年01月18日 12:36
  • 1385

Sqoop-1.99.7安装配置(详细图文)

环境:centos 6.5,hadoop2.6.4集群
  • M_SIGNALs
  • M_SIGNALs
  • 2016年11月16日 18:03
  • 2943

CentOS 6.7安装Sqoop 1.4.6

之前已经在CentOS 6.7上安装部署Hadoop 2.7.2(http://blog.csdn.net/noob_f/article/details/53366756),并正常启动Hadoop集群...
  • Noob_f
  • Noob_f
  • 2016年12月01日 19:59
  • 614

CentOS7安装Sqoop2连接MySQL(Hadoop2.6,MySQL6.5,Sqoop1.99.6)

为什么强调1.99.6因为不同Sqoop版本对应不同的Hadoop版本. 1.Hadoop环境,参考: http://blog.csdn.net/a237428367/article/details/...
  • a237428367
  • a237428367
  • 2016年01月08日 17:32
  • 2185

CentOS下sqoop配置安装

需要用到Sqoop将原来mysql中的数据导入到HBase,以下是安装配置Sqoop的步骤和问题记录: 1. 项目用到的hadoop的版本是1.1.2,所以对应的sqoop是sqoop-1.4....
  • whb123andy
  • whb123andy
  • 2013年11月29日 10:36
  • 2408

centos7(vm)下sqoop1.99.7安装(x86)

1.vm安装(略) 2.软件下载 sqoop1.99.7 jdk-8u77-linux-x64.tar
  • gml03361
  • gml03361
  • 2016年12月20日 22:55
  • 333

Linux安装Sqoop(CentOS7+Sqoop1.4.6+Hadoop2.8.0+Hive2.1.1)

sqoop安装\Linux安装Sqoop(CentOS7+Sqoop1.4.6) 版本号:CetOS7 Sqoop1.4.6 Hadoop2.8.0 Hive2.1.1...
  • pucao_cug
  • pucao_cug
  • 2017年05月14日 23:06
  • 2208

CentOS环境下安装Sqoop导入数据到HDFS

一、准备工作 1.Had
  • leolaurel
  • leolaurel
  • 2014年04月19日 18:55
  • 5558

sqoop安装及使用

安装下载地址: http://archive.cloudera.com/cdh5/cdh/5/sqoop-1.4.6-cdh5.5.2.tar.gz 下载 sqoop-1.4.6-cdh5.5.2...
  • xuyaoqiaoyaoge
  • xuyaoqiaoyaoge
  • 2017年04月23日 00:27
  • 774

CentOS下sqoop1.4.4的安装

1. 我的hadoop的版本是1.1.2,对应的sqoop是sqoop-1.4.4.bin__hadoop-1.0.0,sqoop-1.4.4.bin__hadoop-1.0.0的下载地址:    ...
  • whkj200913
  • whkj200913
  • 2013年12月03日 22:16
  • 343
内容举报
返回顶部
收藏助手
不良信息举报
您举报文章:CentOS下sqoop1.4.4的安装
举报原因:
原因补充:

(最多只允许输入30个字)