Hive 常用命令小记

最新推荐文章于 2024-05-06 11:17:32 发布
最新推荐文章于 2024-05-06 11:17:32 发布
阅读量97 收藏
点赞数
分类专栏： Hive 文章标签： 大数据
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/iteye_19215/article/details/82440727
版权

hadoop job  -Dmapred.job.tracker=master:9001 -kill job_201210301532_0351 命令可以把已经提交的mapred任务干掉，kill后面的参数可以在web管理界面上查到

 

LOAD DATA LOCAL INPATH '/usr/local/hive-0.7.1/bin/go.log' OVERWRITE INTO TABLE hive_game_login_tmp_test; 从本地路径加载数据

 

INSERT OVERWRITE TABLE hive_game_login partition(gameid=000045,statdate='2012-10-01') SELECT a.* FROM hive_game_login_tmp_test a; 从其他表加载数据

iteye_19215
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
【2022】小记：CDH hive 10000端口连接不上问题
errizh的博客
02-18 4378
转眼又是三年，老兵好久没更博了 【问题】项目用到了CDH hive，测试发现应用客户端jdbc连接不上hive问题 【解决步骤】 1.登录cloudera manager 发现hiveServer2 服务异常 2.重启后，显示hiveServer2服务正常，但应用仍连接不上10000端口 3.登录host主机，发现hiveServer2进程已启动，但10000服务端口未监听。。 4.到/var/log/hive下查看hive日志，有报错 5.定位到问题：hive连接不上hdfs的nam
hive常用命令+日常
02-26
hive常用命令+日常
hadoop mapred-queue-acls 配置
caodaoxi的专栏
06-18 100
hadoop作业提交时可以指定相应的队列，例如:-Dmapred.job.queue.name=queue2通过对mapred-queue-acls.xml和mapred-site.xml配置可以对不同的队列实现不同用户的提交权限. 先编辑mapred-site.xml，修改配置如下(增加四个队列): <property> <name>mapred.queue.nam...
hive优化小记
weixin_36840127的博客
04-04 369
不过，某个特定的job可能包含众多的阶段，而这些阶段可能并非完全互相依赖的，也就是说有些阶段是可以并行执行的，这样可能使得整个job的执行时间缩短。如果有更多的阶段可以并行执行，那么job可能就越快完成。谓词下推后，过滤条件在map端执行，减少了map端的输出，降低了数据在集群上传输的量，节约了集群的资源，也提升了任务的性能。从HIVE角度来看的话呢，小文件越多，map的个数也会越多，每一个map都会开启一个JVM虚拟机，每个虚拟机都要创建任务，执行任务，这些流程都会造成大量的资源浪费，严重影响性能；
Sqoop入门小记
QiSorry
12-17 118
Sqoop入门 基本介绍 官网：http://sqoop.apache.org/ 介绍： 用于在hadoop和结构化数据存储（如关系数据库MySQL）之间高效地传输批量数据的工具，可以将关系型数据库（MySQL）中的数据导入到HDFS/Hive/HBse等等中，也可以将HDFS/Hive等等中的数据导入到关系型数据库中 RDBMS（如MySQL中的数据） ==> Hadoop(HDFS/Hive/HBase…) Hadoop(HDFS/Hive/HBase…) ==> RDBMS（如MySQL
Phoenix实践 —— Phoenix SQL常用基本语法总结小记
qq_41018861的博客
06-11 3071
详细语法参见官网语法这里只给出常用的一些语法 Phoenix Shell常用的命令操作 !table --查看表信息 !describe tablename --可以查看表字段信息 !history --可以查看执行的历史SQL !dbinfo !index tb; --查看tb的索引 !quit; --退出phoenix shell help --查看其他操作 HDFS数据直接导入到表中的操作 hadoop jar /home/phoenix-4.12/phoenix-4.6.0-HBase-1..
MLSQL 的小记
qq_42496461的博客
01-12 626
???? MLSQL 的小记 MLSQL 解决了哪些问题 一. 配置 MLSQL 源码地址 engine和cluster 源码地址 console 1. mlsql-engine 模块 下图 mlsql_18.png 为 节点启动mlslq-engine 命令打印出的 为命令谁需要的变量 windows环境下调试代码：idea 打包在下载代码，修改package.cmd 。执行package.cmd 即可打包。 set MLSQL_SPARK_VERSIOIN=2.4 set DRY_RUN=false
后台运行脚本命令
s2421458535的博客
07-28 6316
    首页 博客 学院 下载 GitChat TinyMind 论坛 问答 商城 VIP 活动 招聘 ITeye CSTO VIP 活动 招聘 ITeye CSTO     写博客 发Chat 登录注册 我的博客 消息(3) 帐号设置 反馈 帮助 退出 艾欧尼亚归我了 胸中有血，手里有剑...
真正让你明白Hive参数调优系列1：控制map个数与性能调优参数
weiha666的博客
12-24 888
...
Hadoop、Pig、Hive、Storm、NoSQL 学习资源收集【Updating】
sxqzxj的专栏
05-11 1560
目录[-] （一）hadoop 相关安装部署 （二）hive （三）pig （四）hadoop原理与编码 （五）数据仓库与挖掘 （六）Oozie工作流 （七）HBase （八）flume （九）sqoop （十）ZooKeeper （十一）NOSQL （十二）Hadoop 监控与管理 （十三）Storm （十四）YARN & Hadoop 2.0 （十五）ha
Hive常用命令
01-07
在启动Hive之前，必须先启动hdfs和yarn $ sbin/start-dfs.sh $ sbin/start-yarn.sh 启动hive。 $ bin/hive 查看数据库 hive> show databases; 打开默认数据库 hive> use default; 显示default数据库中的表 hive> ...
hive常见命令
01-20
hive常用命令 1、进入hive数据库：hive 2、查看hive中的所有数据库：show databases; 3、用default数据库：use default; 4、查看所有的表：show tables; 5、查询表结构：desc mytest（表名）; 6、查询表数据： ...
hive 常用命令
08-17
hive 常用命令大全，包含分区域表、函数，常用命令等
Debezium日常分享系列之：Debezium 2.7.0.Alpha1发布
zhengzaifeidelushang的博客
04-29 785
虽然 Oracle 建议用户避免使用基于 RAW 的列，但出于向后兼容性的原因，这些列仍广泛用于标准 Oracle 表中。但在某些业务用例中，继续使用 RAW 列而不是其他数据类型是有意义的。Debezium 2.7 引入了一个专门针对 Oracle 的新自定义转换器，称为 RawToStringConverter。此自定义转换器旨在允许您使用 STRING 架构类型快速将 RAW 列的字节数组内容转换为基于字符串的字段。
ruoyi漏洞总结
qq_59468567的博客
05-03 665
baseurl 就有了，有的是全的 url，大多数是只给个 baseurl：prod-api，这类。js 下面有个 app.xxxxxx(一些个字母数字).js，直接里面搜。如果页面访问显示不正常，可添加默认访问路径尝试是否显示正常。若依有个特点，密码可能在前台直接显示，点击并能够成功登录。监控中存在大量接口路径，可通过未授权获取更多敏感信息在。图标和登录页面及验证码处的样式识别出若依。认证失败，无法访问系统资源。进行替换实现登录系统。数据库存在未授权访问。
ES集群分布式查询原理
weixin_53676834的博客
04-30 753
当新增文档时，应该保存到不同分片，保证数据均衡，那么coordinating node如何确定数据该存储到哪个分片呢？2）对id做hash运算，假如得到的是2，则应该存储到shard-2。3）shard-2的主分片在node3节点，将数据路由到node3。5）同步给shard-2的副本replica-2，在node2节点。6）返回结果给coordinating-node节点。1）新增一个id=1的文档。
《崇明新闻》报道智慧岛大数据云计算中心
YUNDUANNET的博客
04-29 707
4月22日，《崇明新闻》报道了云端股份目前在建的上海智慧岛大数据云计算中心，采访了新基建项目CEO张海东，向其了解目前云计算中心的项目概况以及建设进度。
《深入理解kafka-核心设计与实践原理》第一章：概念
最新发布
qq_41157876的博客
05-06 851
理解：分区 ISR集合中的每个副本都会维护自身的 LEO，而ISR集合中最小的 LEO 即为分区的 HW ，对消费者而言只能消费 HW 之前的消息。总结：kafka通过partition的水平扩展支持高性能，通过replica提升容灾能力。4个broker，3个partition，replica=3（一主两从）
hiveddl常用命令
09-16
以下是Hive DDL的一些常用命令： 1. 创建数据库：CREATE DATABASE database_name; 2. 使用数据库：USE database_name; 3. 创建表：CREATE TABLE table_name (column_name data_type, ...); 4. 查看表结构：DESCRIBE...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值