sqoop之常用命令

最新推荐文章于 2021-12-25 18:18:31 发布
最新推荐文章于 2021-12-25 18:18:31 发布
阅读量516 收藏
点赞数
分类专栏： sqoop
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/yy490146739/article/details/8688178
版权

序号

命令/command

类

说明

1

Import

ImportTool

从关系型数据库中导入数据(来自表或者查询语句)到HDFS中

2

export

ExportTool

将HDFS中的数据导入到关系型数据库中

3

codegen

CodeGenTool

获取数据库中某张表数据生成Java并打成jar包

4

create-hive-table

CreateHiveTableTool

创建Hive表

5

eval

EvalSqlTool

查看SQL执行结果

6

import-all-tables

ImportAllTablesTool

导入某个数据库下所有表到HDFS中

7

job

JobTool

8

list-databases

ListDatabasesTool

列出所有数据库名

9

list-tables

ListTablesTool

列出某个数据库下所有表

10

merge

MergeTool

11

metastore

MetastoreTool

12

help

HelpTool

查看帮助

13

version

VersionTool

查看版本

yy490146739
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
sqoop连接mysql出现Failed to list databases com.mysql.jdbc.exceptions.jdbc4.CommunicationsException
BeatTime的博客
03-02 7968
注：导致该错误有多种可能，不保证本方法能解决。 ——————————————————————————————————————————————————— 因为前段时间Ubuntu虚拟机桌面崩了，找了很多方法都没法解决。后来只好把hadoop项目转到另一个虚拟机上，却没想到sqoop连接数据库时一直出现 “ERROR manager.CatalogQueryManager: Failed to
大数据业务及数据采集和迁移需求-安装和配置Sqoop
Aa112233aA1的博客
06-29 231
大数据Sqoop数据的采集和迁移：大数据Sqoop教程丨从零开始讲解大数据业务及数据采集和迁移需求 Sqoop的安装配置非常简单，前提是部署Sqoop工具的机器需要具备Java和Hadoop的运行环境。接下来，采用Sqoop-1.4.6来讲解Sqoop的安装配置，下载地址http://archive.apache.org/dist/sqoop/1.4.6/。 1．Sqoop安装 首先将下载好的安装包上传至hadoop01主节点的/export/software目录中，并解压至/export/servers路
从MySQL中加载数据（Spark Shell方式）和 将数据写入到MySQL中（打jar包方式）
大JAVA解决方案
04-21 1897
1. 数据源1.1. JDBCSpark SQL可以通过JDBC从关系型数据库中读取数据的方式创建DataFrame，通过对DataFrame一系列的计算后，还可以将数据再写回关系型数据库中。1.1.1. 从MySQL中加载数据（Spark Shell方式）1.启动Spark Shell，必须指定mysql连接驱动jar包/usr/local/spark-1.5.2-bin-hadoop2.6/b...
大体流程
Jianghebujini的博客
05-19 131
⽐赛系统使⽤ 1. 界⾯介绍 2. 主机登录 基础环境 1. 主机名修改,主机与ip地址映射关系(ip地址使⽤的是局域⽹) 2. ssh免密登录 3. 时间同步 4. 关闭防⽕墙 5. 本地repo⽂件 6. 配置JDK 集群搭建 Zookeeper集群搭建 1. 下载⽂件 wget http://xxxxx 2. 解压 tar- -xzvf xxx.tar.gz 3. 配置系统环境变量 ZOOKEEPER_
黑猴子的家：Sqoop 命令与参数详解
黑猴子的博客
09-09 285
1、Sqoop 公用参数：数据库连接 https://www.jianshu.com/p/51498d5a648d 2、Sqoop 公用参数：import https://www.jianshu.com/p/88a9e915b5f8 3、Sqoop 公用参数：export https://www.jianshu.com/p/882722c7c017 4、Sqoop 公用参数：hive ...
Sqoop 之 常用命令
weixin_36630761的博客
08-10 250
转自：http://blog.csdn.net/duan19056/article/details/17288145 1、列出mysql数据库中的所有数据库  sqoop list-databases --connect jdbc:MySQL://localhost:3306/ -username dyh -password 000000   2、连接mysql并列出数据库
Sqoop常用命令
weixin_55862251的博客
12-09 626
Sqoop的常用命令如下表所示 命令 说明 list-databases 列出所有数据库名 list-tables 列出某个数据库下所有表 import 将数据导入到HDFS集群 export 将HDFS集群数据导出 help 打印sqoop帮助信息 version 打印sqoop版本信息 对于不同的命令，有不同的参数，接下来我们来一一列举说明。 首先是公用的参数，所谓公用参数，就是大多数命令都支持的参数。最常用的公共参数是数据库连接的参数，如下表所示： 参数
Sqoop 常用命令
weixin_44966780的博客
12-25 392
Sqoop 常用命令 这里给大家列出来了一部分Sqoop操作时的常用参数，以供参考，需要深入学习的可以参看对应类的源代码。 序号 命令 类 说明 1 import ImportTool 将数据导入到集群 2 export ExportTool 将集群数据导出 3 codegen CodeGenTool 获取数据库中某张表数据生成Java并打包Jar 4 create-hive-table CreateHiveTableTool 创建Hive表 5 eval EvalSqlTo
sqoop常用命令
qq_28603127的博客
06-22 245
sqoop命令 bin/sqoop xxx 1 import 将数据导入hdfs 2 export 将数据从hdfs导出 3 codegen 获取关系型数据库中的表数据生成java jar 4 create-hive-table 创建hive表 5 eval 查看sql执行结果 6 import-all-tables 导入库下面所有的表到hdfs 7 job 生成sqoop任务,以便后续执行(类似于定义一个函数,用时候直接通过job名字调用) 8 list_databases 列出所有数据库名 9 l
sqoop常用命令.xlsx
01-15
sqoop的常用指令操作
sqoop常用命令文件
05-25
以上只是 Sqoop 常用命令的一部分，实际使用中还有更多高级特性和选项，如分区导入、定制 MapReduce 类、使用 Hive 表等。对于 Hadoop 用户来说，熟练掌握 Sqoop 命令是实现数据库与 Hadoop 间高效数据交互的关键。...
sqoop常用命令参数-中文1
08-08
在这个场景中，我们将详细探讨 Sqoop 的常用命令参数。 1. **通用参数**： - `--connect`：这是连接关系型数据库的 URL，用于指定要导入或导出数据的数据库地址。 - `--connection-manager`：用于指定使用的连接...
Sqoop同步数据命令
01-07
Sqoop介绍 Sqoop是一个用来将Hadoop和关系型数据库中的数据相互转移的工具，可以使用Sqoop将数据从MySQL或Oracle等关系数据库管理系统（RDBMS）导入Hadoop分布式文件系统（HDFS），在Hadoop MapReduce...常用参数 -co
sqoop命令参数中文手册
06-08
大数据同步工具sqoop1命令中文手册 以及常用命令说明
个人单页简历素材-简约单页24.docx
07-23
【简历模板】工作总结、商业计划书、述职报告、读书分享、家长会、主题班会、端午节、期末、夏至、中国风、卡通、小清新、岗位竞聘、公司介绍、读书分享、安全教育、文明礼仪、儿童故事、绘本、防溺水、夏季安全、科技风、商务、炫酷、企业培训、自我介绍、产品介绍、师德师风、班主任培训、神话故事、巴黎奥运会、世界献血者日、防范非法集资、3D快闪、毛玻璃、人工智能等等各种样式的ppt素材风格。 设计模板、图片素材、PPT模板、视频素材、办公文档、小报模板、表格模板、音效配乐、字体库。 广告设计：海报，易拉宝，展板，宣传单，宣传栏，画册，邀请函，优惠券，贺卡，文化墙，标语，制度，名片，舞台背景，广告牌，证书，明信片，菜单，折页，封面，节目单，门头，美陈，拱门，展架等。 电商设计：主图，直通车，详情页，PC端首页，移动端首页，钻展，优惠券，促销标签，店招，店铺公告等。 图片素材：PNG素材，背景素材，矢量素材，插画，元素，艺术字，UI设计等。 视频素材：AE模板，会声会影，PR模板，视频背景，实拍短片，音效配乐。 办公文档：工作汇报，毕业答辩，企业介绍，总结计划，教学课件，求职简历等PPT/WORD模板。
【精美排版】中北大学嵌入式期末测验(完整).docx
07-23
嵌入式
毕业设计项目之基于Opencv的车牌识别系统项目源码
最新发布
07-23
毕业设计项目之基于Opencv的车牌识别系统项目源码 版本：python3.7.3，opencv4.0.0.21，numpy1.16.2，tkinter和PIL5.4.1.
stm32f407zgt6空白工程
07-23
此工程为stm32f407zgt6的空白工程，通过cmake方式来进行管理
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值