![](https://img-blog.csdnimg.cn/20201014180756913.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Sqoop
文章平均质量分 67
Sqoop
SuperQiu~
这个作者很懒,什么都没留下…
展开
-
Sqoop 命令参数
Sqoop 命令&参数:codegen 将关系型数据库中的表映射为一个Java类,在该类中有各列对应的各个字段。 如: sqoop codegen \ --connect jdbc:mysql://hadoop102:3306/company \ --username root \ --password 123456 \ --table staff \ --bindir /home/admin/Desktop/staff \ --class-name Staff \ --fields-termina原创 2021-12-25 18:55:10 · 1415 阅读 · 0 评论 -
Sqoop export命令
Sqoop 命令&参数:export 从HDFS(包括Hive和HBase)中奖数据导出到关系型数据库中。原创 2021-12-25 18:52:51 · 533 阅读 · 0 评论 -
Sqoop import 命令
Sqoop 命令&参数:import 将关系型数据库中的数据导入到HDFS(包括Hive,HBase)中,如果导入的是Hive,那么当Hive中没有对应表时,则自动创建。 1)命令: 如:导入数据到hive中 sqoop import \ --connect jdbc:mysql://hadoop102:3306/company \ --username root \ --password 123456 \ --table staff \ --hive-import 如:增量导入数据到hive中,原创 2021-12-25 18:20:19 · 736 阅读 · 0 评论 -
Sqoop 公用参数
公用参数:数据库连接 序号 参数 说明 1 –connect 连接关系型数据库的URL 2 –connection-manager 指定要使用的连接管理类 3 –driver Hadoop根目录 4 –help 打印帮助信息 5 –password 连接数据库的密码 6 –username 连接数据库的用户名 7 –verbose 在控制台打印出详细信息 公用参数:import 序号 参数 说明 1 –enclosed-by <char>原创 2021-12-25 18:19:21 · 119 阅读 · 0 评论 -
Sqoop 常用命令
Sqoop 常用命令 这里给大家列出来了一部分Sqoop操作时的常用参数,以供参考,需要深入学习的可以参看对应类的源代码。 序号 命令 类 说明 1 import ImportTool 将数据导入到集群 2 export ExportTool 将集群数据导出 3 codegen CodeGenTool 获取数据库中某张表数据生成Java并打包Jar 4 create-hive-table CreateHiveTableTool 创建Hive表 5 eval EvalSqlTo原创 2021-12-25 18:18:31 · 393 阅读 · 0 评论 -
Sqoop 简单使用案例
Sqoop 简单使用案例 导入数据 在 Sqoop 中,“导入”概念指:从非大数据集群(RDBMS)向大数据集群(HDFS,HIVE,HBASE)中传输数据,叫做:导入,即使用 import 关键字。 RDBMS 到 HDFS 确定 Mysql 服务开启正常 在 Mysql 中新建一张表并插入一些数据 $ mysql -uroot -p123456 mysql> create database company; mysql> create table company.staff(id int原创 2021-12-25 17:51:03 · 168 阅读 · 0 评论 -
Sqoop 简介安装
Sqoop 简介安装 Sqoop 简介 Sqoop 是一款开源的工具,主要用于在 Hadoop(Hive)与传统的数据库(mysql、postgresql…)间进行数据的传递,可以将一个关系型数据库(例如 : MySQL ,Oracle ,Postgres 等)中的数据导进到 Hadoop 的 HDFS 中,也可以将 HDFS 的数据导进到关系型数据库中。 Sqoop 项目开始于 2009 年,最早是作为 Hadoop 的一个第三方模块存在,后来为了让使用者能够快速部署,也为了让开发人员能够更快速的迭代开发原创 2021-12-25 17:17:46 · 83 阅读 · 0 评论