- 博客(8)
- 收藏
- 关注
RSS订阅原创 mapreduce和压缩
hadoop如果设置了结果压缩，他是每次map函数或者reducer函数执行完成之后把数据流交给压缩代码进行压缩，这就造成如果一个reducer中写的内容很少时压缩比很小。...
2013-07-09 16:07:35
88
原创 对kettle中share.xml的误解
我们原来以为kettle的share.xml只在编辑kjb和ktr时才起作用。但是经过今天报错测试，对该文件又有新的认知。 在ktr,kjb运行的时候share.xml也会被读取且起到关键作用，数据库的配置信息首先从该文件读取，如果该文件内不存在才会从执行的文件中读取数据库连接信息。 也就是说share.xml的数据库连接信息比你要执行的文件中的数据库连接信息更重要。 但是，如果...
2013-04-09 11:44:57
1468
原创 mysql中取得昨天日期数值的方法及典型错误
正确做法: select date(ADDDATE(curdate(), INTERVAL -1 DAY))*1; 典型错误做法: select curdate()-1;
2012-12-10 18:52:10
115
原创 kettle清理数据库连接的方法
1：清理shared.xml中的不用的数据库连接。（他的保存位置一般在用户主目录下边的.kettle目录中） 2：用文本编辑软件打开kjb，ktr文件删除用户到的connection项，保存。 ...
2012-11-09 16:37:10
1988
原创 kettle的第二个bug
在做数据抽取的时候如果是直接从dbinput读入数据写入dbouput中，从input中读取到的空字符串会在dboutput时转化为null.
2012-09-18 10:58:55
121
原创 kettle的bug
在kettle中的kettle-core.jar中存在一个bug，导致kjb在spoon中执行同在kitchen执行和调用api的时候执行结果不一样，体现在变量替换中如果要替换的变量不存在的时候，在spoon中替换为空，在kitchen中则不替换。 具体bug所在位置为：org.pentaho.di.core.util.StringUtil中的53行。 原来为 int i = rest.in...
2012-09-14 15:24:17
1152
原创 64位系统fedora 10 配置
打造实用的Fedora 10 （安装后使用设置说明） 本人使用的是Fedora 10 x86_64位版！所以X86＿64位版为例。 欢迎反馈! 我欢迎对这份文档的反馈信息，有什么问题请给我留言，谢谢！ 一、安装第三方软件源： Fedora 8, 9 or 10: su -c 'rpm -Uvh http://downlo...
2009-07-12 15:56:34
189
mondrian workbench 使用技巧
workbench.bat 修改 rem put mondrian.properties on the classpath for it to be picked up 下面一行 set CP=./mondrian.properties;%CP% 去掉ROOT的部分。 修改java -Xms100m -Xmx500m -cp "%CP%" -Dlog4j.configuratio...
2009-07-10 10:55:48
168
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人