lucene,hadoop,nutch有用过么?
如果大家积极,我可以写一个简单的说明文档,能让大家在自己的机器上构建一个类似google的搜索引擎。说明如下:
lucene:一个java的开源包,做底层的信息检索
hadoop:一个google file system的实现。可以完成如下的功能,让很多台机器的硬盘合成为一个大的硬盘,而且有冗余等功能。
nutch:一个建立在lucene,hadoop上的开源搜索引擎。可以构建自己的搜索引擎。
这个包对于刚学编程的同学来说太难了。但是对于计算机系的同学有很多好处。分布式文件系统能让你们了解底层的os对文件系统怎么处理,另外信息检索也是最近很红的一个方向。可以面google,百度。不夸张说,你把所有所有内部结构搞明白。基本出去计算机公司可以随便日了
构建自己的搜索引擎(lucene,hadoop,nutch)
最新推荐文章于 2022-05-09 00:28:47 发布