![](https://img-blog.csdnimg.cn/20201014180756918.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
sqoop
风zi
这个作者很懒,什么都没留下…
展开
-
一、sqoop从mysql导入导出数据到hdfs、hive、hbase
一、sqoop介绍 Sqoop是一款开源的工具,主要用于在Hadoop(Hive)与传统的数据库(mysql、postgresql…)间进行数据的传递,可以将一个关系型数据库(例如 : MySQL ,Oracle ,Postgres等)中的数据导进到Hadoop的HDFS中,也可以将HDFS的数据导进到关系型数据库中。 sqoop原理 将导入或导出命令翻译成mapreduce程序来实现。 在翻译出的mapreduce中主要是对inputformat和outputformat进行定制。 sqoop安装 1、下原创 2020-06-02 20:58:35 · 716 阅读 · 0 评论 -
一、sqoop 操作mysql与hdfs之间数据传输
/* SQLyog Ultimate v12.08 (64 bit) MySQL - 5.6.34 : Database - spark */ /*!40101 SET NAMES utf8 */; /!40101 SET SQL_MODE=’’/; /!40014 SET @OLD_UNIQUE_CHECKS=@@UNIQUE_CHECKS, UNIQUE_CHECKS=0 /; /!4001...原创 2019-09-26 15:20:52 · 1756 阅读 · 0 评论