- 博客(2)
- 收藏
- 关注
转载 HashMap? ConcurrentHashMap? 相信看完这篇没人能难住你!
作者:crossoverJie来源:crossoverJie 公众号前言Map 这样的Key Value在软件开发中是非常经典的结构,常用于在内存中存放数据。本篇主要想讨论 ConcurrentHashMap 这样一个并发容器,在正式开始之前我觉得有必要谈谈 HashMap,没有它就不会有后面的 ConcurrentHashMap。HashMap众所周知 HashMa...
2019-07-18 15:06:44
76
转载 hive优化之-控制hive任务中的map数和reduce数
一、 控制hive任务中的map数: 通常情况下,作业会通过input的目录产生一个或者多个map任务。 主要的决定因素有: input的文件总个数,input的文件大小,集群设置的文件块大小(目前为128M, 可在hive中通过set dfs.block.size;命令查看到,该参数不能自定义修改); 举例: a) 假设input目录下有1个文件a,大小为780M,那么ha...
2019-06-24 16:59:45
78
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人