![](https://img-blog.csdnimg.cn/20201014180756926.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Hadoop
深度学习V666
这个作者很懒,什么都没留下…
展开
-
Hive 执行日志
【代码】Hive 执行日志。原创 2024-06-28 08:51:04 · 137 阅读 · 0 评论 -
MapReduce优化方法
MapReduce优化方法主要从六个方面考虑:数据输入、Map阶段、Reduce阶段、IO传输、数据倾斜问题和常用的调优参数。原创 2024-06-27 09:30:02 · 776 阅读 · 0 评论 -
sqoop hive mysql 互传shell代码
【代码】sqoop hive mysql 互传shell代码。原创 2024-01-12 16:20:34 · 355 阅读 · 0 评论 -
Hive表数据同步至HBase
(2)利用 HBase 的 bulkload 命令移动 HFile 至合适的位置。(1)编写 Spark 程序转换原始数据为 HFile。原创 2023-08-30 19:48:29 · 153 阅读 · 1 评论 -
Hive to Elaticsearch 数据导入
【代码】Hive to Elaticsearch 数据导入。原创 2023-08-18 09:04:00 · 88 阅读 · 1 评论 -
HBase参数调优
内存大小:master默认为1G,可增加到2G,regionserver默认1G,可调大到10G,或者更大,zk并不耗资源,可以不用调整;HBase RegionServer 的 Java 堆栈大小(字节)HBase Master 的 Java 堆栈大小(字节)原创 2023-07-20 17:31:58 · 241 阅读 · 0 评论