- 博客(12)
- 资源 (3)
- 收藏
- 关注
原创 和中国雅虎说迟到的拜拜
周五,阿里集团宣布口碑网并入淘宝网,看到这个消息,心中五味杂陈。在雅虎的三年工作情景,一下子就浮现在眼前。 我的第一份工作就是中国雅虎,当时没有怎么找工作,后来去雅虎应聘还应聘上了,就加入了。印象最深的是毕业前去参加阿里集团的年会,貌似因为雅虎刚刚和阿里合并,上下的期望都很高,业务在积极开展,人手比较紧缺,所以对我们这批应届毕业生格外器重,这样我们也有幸免费去杭州旅游了一
2009-08-26 12:48:00 880
原创 关于把hadoop和pg整合成为一个分布式数据库的初步设想
把一些想法整理到了ppt里面:1. 主要是sql如何可以在Map-Reduce框架下面完成分布化:可能需要解析成map-phrase sql和reduce-phrase sql2. PG如何修改analyse_rewrite和planner接口3. 如何整合hadoop和pg都是按照最少开发量的设计,对性能效率没有过多的考虑,目的是尽量的sql兼容,而不是像hive和pig那样搞一
2009-08-25 17:28:00 1877
原创 linux上配置svnserve服务,搭建自己的svn服务器
为了方便进行hadoop开发和测试核自己控制,我在linux开发机上搭建了一个svnserve,没想到还费了挺多时间,汗具体步骤如下,希望后来人可以节约点时间了1. 安装subversion我采用的方式是 sudo yum subversion根据你的box的不同你可以采用不同的安装方式2. 创建你的svn仓库文件目录svnadmin create /home/maose
2009-08-23 13:14:00 611
原创 差点忘了hadoop dfsadmin命令了
今天早上使用libhdfs 调用c++接口进行程序调试,由于多次段错误,造成hdfs数据异常,hdfs进入safemode,突然忘记该怎么关闭了,我记得在hadoop很早的版本里面是hadoop dfs里面的,可惜怎么都找不到,纳闷了一会儿,后来恍然,升级后的hadoop已经把dfs的一些管理命令移到了hadoop dfsadmin了,哈哈!
2009-08-14 08:57:00 2187
原创 你不知道的C++(1)-- operator NEW
c++中的new操作符?多简单啊!但是你是否用过标准库里面的这三个操作符呢?void* operator new (std::size_t size) throw (std::bad_alloc);void* operator new (std::size_t size, const std::nothrow_t& nothrow_constant) throw();void* ope
2009-08-13 20:10:00 590
原创 今天的业余工作
让PostgreSQL的外部表扩展能够使用sql查询hadoop里面的数据,而不是像hive那样使用hsql,估计今明两天能够完成,这两天事情太多,又是刷墙又是驾校考试,努力吧!
2009-08-13 19:45:00 610
原创 PostgreSQL外部表项目
今天终于把PostgreSQL外部表项目的代码版本稳定了,大家可以访问http://pgfoundry.org/projects/pgexternaltable/ 下载并使用了PostgreSQL外部表项目的目的主要是:在PostgreSQL上提供类似Oracle的外部表功能,使用说明见:http://pgfoundry.org/docman/view.php/1000407/11599/
2009-08-06 15:27:00 1547 1
原创 PostgreSQL内部概貌ppt
昨天写的一个介绍PostgreSQL内部概貌的ppt,呵呵主要对 优缺点体系结构和运行流程扩展开发调优方法做了介绍http://pgfoundry.org/docman/view.php/1000407/13444/PostgreSQL内部概貌.ppt
2009-08-05 11:22:00 1088
原创 Hadoop分布式程序的调试方法
C++沉思录+C专家编程+C和指针 39.0元 了解一个系统的内部,我觉得最好的办法只有两个:1.找系统的开发设计者仔仔细细的问,2.自己跟踪调试系统。估计要找到cutting详细聊不太可能,那只有第二个
2009-08-03 11:42:00 3550 1
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人