- 博客(2)
- 资源 (1)
- 收藏
- 关注
原创 Hadoop 参数小结
最近用Hive来将大数据量以大量动态分区形式导入Impala,复杂sql及大数据量导致需要设置很多参数来满足任务要求。甩一下自己用Hive设置过几个参数: cursor.execute("set mapreduce.map.memory.mb=16384") //每个maptask分配得到的内存,默认为1024M cursor.execute("set mapreduce.reduce.
2016-07-29 15:28:36 201
转载 XML解析的四种方法对比
1.详解 1)DOM(JAXP Crimson解析器) DOM是用与平台和语言无关的方式表示XML文档的官方W3C标准。DOM是以层次结构组织的节点或信息片断的集合。这个层次结构允许开发人员在树中寻找特定信息。分析该结构通常需要加载整个文档和构造层次结构,然后才能做任何工作。由于它是基于信息层次的,因而DOM被认为是基于树或基于对象的。DOM以及广义的基于树的处理具有几个优点。
2013-09-16 16:52:57 360
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人