Hive相关
文章平均质量分 75
记录分享
tuoluzhe8521
这个作者很懒,什么都没留下…
展开
-
Hive使用shell调用命令行特殊字符处理
数据处理常用hive -e的方式,通过脚本操作数仓,过程中常常遇到特殊字符的处理,如单双引号、反斜杠、换行符等处理原创 2024-01-15 20:29:06 · 1009 阅读 · 0 评论 -
Hive命令行运行SQL将数据保存到本地如何去除日志信息
hive命令行查询数据保存到本地如何不打印任何(warn/info/error等)日志信息原创 2024-01-13 22:57:21 · 638 阅读 · 0 评论 -
Hive自定义函数详解
hive自定义函数的详细代码,hive自定义函数命令原创 2023-12-31 22:07:40 · 995 阅读 · 0 评论 -
Hive生产调优介绍
hive生产调优各种命令原创 2023-12-31 22:06:38 · 1214 阅读 · 0 评论 -
Spark生产集群各种使用
spark on yarn 操作doris数据配置及使用,spark操作对象存储(cos)作为存储系统,spark操作HDFS作为存储系统,spark生产集群配置,hive生产集群配置原创 2023-12-25 17:12:52 · 710 阅读 · 0 评论 -
最全HSQL命令大全(Hive命令)
最全HSQL命令中文解释,值得收藏原创 2023-12-23 09:08:50 · 1406 阅读 · 1 评论 -
Hive和Spark生产集群搭建(spark on doris)
hive on spark生产集群搭建,可以切换为spark-sql,调度采用yarn,同时可以用spark操纵doris原创 2023-12-21 18:16:25 · 663 阅读 · 1 评论 -
Hive on spark 配置 & 踩坑记录 Failed to create spark client
-Hive查询时,报错java.lang.OutOfMemoryError: Java heap space-这种情况属于 JVM 堆内存溢出了,在y arn-site.xml 文件中添加如下代码-->编译步骤:官网下载Hive3.1.2源码,修改pom文件中引用的Spark版本为3.0.0,如果编译通过,直接打包获取jar包。注意:hive.spark.client.connect.timeout的默认值是1000ms,如果执行hive的insert语句时,抛如下异常,可以调大该参数到10000ms。转载 2022-11-23 12:27:27 · 1482 阅读 · 0 评论 -
hiveserver2高可用+故障重启(失败重启)应用总结
为解决实际生产中HiveServer2故障问题,笔者多方查阅资料研究,总结以下方法,提高HiveServer2的高可用和失败自动重启原创 2022-11-23 09:59:40 · 1792 阅读 · 0 评论