- 博客(2)
- 资源 (6)
- 收藏
- 关注
RSS订阅原创 【转载】hive中map和reduce个数控制
一、 控制hive任务中的map数: 1. 通常情况下，作业会通过input的目录产生一个或者多个map任务。 主要的决定因素有： input的文件总个数，input的文件大小，集群设置的文件块大小(目前为128M, 可在hive中通过set dfs.block.size;命令查看到，该参数不能自定义修改)；2. 举例： a) 假设input目录下有...
2014-07-22 21:42:38
167
原创 linux shell
linux shell中数学运算需要单独处理，默认加法为字符串拼接1、错误方法举例 a) var=1+1 echo $var 输出的结果是1+1，悲剧，呵呵 b) var=1 var=$var+1 echo $var 输出结果是1+1，依然悲剧，呵呵 2、正确方法 1)使用let var=1 let "var+=1" echo...
2014-07-15 16:41:32
91
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人