Sqoop
harveybd
这个作者很懒,什么都没留下…
展开
-
Sqoop1 导入与导出数据
本篇博客主要介绍如何使用Sqoop1.x版本来实现数据的导入与导出,笔者使用的版本为Sqoop1.4.6,安装配置请参考博客: http://blog.csdn.net/hg_harvey/article/details/77803520官网文档:http://sqoop.apache.org/docs/1.4.6/SqoopUserGuide.html1.MySQL 导入数据到 HDFS流程图:原创 2017-09-14 21:54:14 · 1656 阅读 · 0 评论 -
Sqoop 简介及安装部署
1.Sqoop 简介及架构1.Sqoop 简介 Sqoop即SQL to Hadoop,是一个将数据在关系数据库(如 MySQL/Oracle 等)和大数据产品(如 Hadoop/Hive/HBase等)之间导入/导出的有效工具,底层是通过MapReduce作业来完成。它充分利用了MapReduce的并行特点以批处理的方式加快数据的传输,同时也借助MapReduce实现了容错。原创 2017-09-02 22:54:46 · 2225 阅读 · 0 评论 -
Sqoop2 MySQL与HDFS导入导出
本篇博客主要介绍sqoop2中如何进行数据的导入导出,笔者使用的版本为1.99.5,安装及配置请参考博客:http://blog.csdn.net/hg_harvey/article/details/77803520Sqoop 命令使用官网: http://sqoop.apache.org/docs/1.99.5/CommandLineClient.htmlSqoop 导入导出官网: https原创 2017-09-14 23:04:21 · 2326 阅读 · 0 评论