- 博客(5)
- 收藏
- 关注
转载 BIEE 12C 连接 HIVE Spark 做数据源
尝试了好多次终于BIEE连通了HIVE和SparkHIVE &Spark 配置:1、在客户机AdminTool配置好Hive ODBC(Oracle DataDirect);2、AdminTool导入的时候会发生异常,HIVE我这里是通过手动添加表和字段的,Spark没问题;3、上传RPD;4、修改linux配置,主要是两个地方,一个是obis.proper
2017-07-26 13:32:50 1418
转载 Hadoop2.6.0配置参数查看小工具
前言使用Hadoop进行离线分析或者数据挖掘的工程师,经常会需要对hadoop集群或者mapreduce作业进行性能调优。也许你知道通过浏览器访问http://master:18088/conf来查看配置信息,如下图所示:但是当Linux工程师们只面对命令行时,如何查看呢?而且如果运维工程师根据集群状况及运行历史使用shell、Python、ruby等脚本写
2017-07-07 14:20:26 536
转载 MapReduce Map数 reduce数设置
JobConf.setNumMapTasks(n)是有意义的,结合block size会具体影响到map任务的个数,详见FileInputFormat.getSplits源码。假设没有设置mapred.min.split.size,缺省为1的情况下,针对每个文件会按照min (totalsize[所有文件总大小]/mapnum[jobconf设置的mapnum], blocksize)为大小来
2017-07-07 10:57:45 797
转载 分区表数据快速迁移
1.查看分区表的信息。SELECT t.BYTES / (1024 * 1024),t.* FROM user_segments t WHERE t.segment_name ='OM_EV_CELL_TAXES_MONTH';查看分区的信息,大小。2.创建新表,福权限。create table OM_EV_CELL_TAXES_MONTH_BAK as se
2017-07-03 14:22:31 4937
转载 Oracle12c中性能优化&功能增强新特性之全局索引DROP和TRUNCATE 分区的异步维护
http://www.itnose.net/detail/6704119.html在数据库维护中Partition 到处可见, 经常要add, drop, split, merge, truncate partition, 比如我们现在的数据库环境一套库每月要增加上万的分区, oracle 在新版本中对于partition一再增强, 稍后会对12C partition相关技术整
2017-07-03 14:08:33 991
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人