- 博客(6)
- 资源 (3)
- 收藏
- 关注
转载 Hadoop之数据仓库构建-Hive
目录Hive是什么... 1hadoop是什么... 1hadoop、hive两者关系... 2hive的优缺点... 2hive的存在意义... 2hive常用命令... 2一些相关命令... 2创建表... 3创建分区partition_table.dt. 3加载数据到分区... 4删除表 drop t
2016-09-29 11:16:10 914
转载 hive.exec.parallel.thread.number
前面提到了hive.exec.parallel可以控制一个sql中多个可并行执行的job的运行方式.当hive.exec.parallel为true的时候,同一个sql中可以并行执行的job会并发的执行.而参数hive.exec.parallel.thread.number就是控制对于同一个sql来说同时可以运行的job的最大值,该参数默认为8.此时最大可以同时运行8个job.
2016-09-29 11:12:04 2249
转载 hive实现任务并行执行
hive.exec.parallel参数控制在同一个sql中的不同的job是否可以同时运行,默认为false.下面是对于该参数的测试过程:测试sql:select r1.afrom (select t.a from sunwg_10 t join sunwg_10000000 s on t.a=s.b) r1 join (select s.b from sunwg_100000
2016-09-29 10:19:08 4040
转载 python lambda
python lambda是在python中使用lambda来创建匿名函数,而用def创建的方法是有名称的,除了从表面上的方法名不一样外,python lambda还有哪些和def不一样呢?1 python lambda会创建一个函数对象,但不会把这个函数对象赋给一个标识符,而def则会把函数对象赋值给一个变量。2 python lambda它只是一个表达式,而def则是一个语
2016-09-28 19:14:21 688
转载 MAVEN常用命令
MAVEN常用命令Maven库:http://repo2.maven.org/maven2/Maven依赖查询:http://mvnrepository.com/Maven常用命令: 1. 创建Maven的普通java项目: mvn archetype:create -DgroupId=packageName -DartifactI
2016-09-27 21:14:06 436
转载 Maven中dependencyManagement和dependencies的作用和联系
在Maven中dependencyManagement的作用其实相当于一个对所依赖jar包进行版本管理的管理器。在dependencyManagement下申明的dependencies,Maven并不会去实际下载所依赖的jar包,而是在dependencyManagement中用一个Map记录了jar的三维坐标。而被仅仅是被dependencies包裹的元素,
2016-09-20 10:40:35 1216 1
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人