- 博客(1)
- 收藏
- 关注
转载 反搜索引擎
最近同事在做搜索引擎,一时兴起,搞了一个反搜索,主要参考这个: 限制Robot访问Web站点的方法 Robot是帮助搜索引擎搜集网页的一种自动化程序,它在访问一个Web站点时,会跟随网页中的链接提取出站点上的大部分内容,并为这些网页建立索引,放在搜索引擎的数据库中。在一些情况下,Web管理员或网页的作者出于某种原因的考虑可能并不想让Robot提取站点上的某些内容,此时可以使
2011-11-09 15:54:50 543
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人