- 博客(1)
- 资源 (3)
- 收藏
- 关注
转载 互联网网站的反爬虫策略浅析
原文地址:http://robbin.iteye.com/blog/451014 因为搜索引擎的流行,网络爬虫已经成了很普及网络技术,除了专门做搜索的Google,Yahoo,微软,百度以外,几乎每个大型门户网站都有自己的搜索引擎,大大小小叫得出来名字得就几十种,还有各种不知名的几千几万种,对于一个内容型驱动的网站来说,受到网络爬虫的光顾是不可避免的。 一些智能的搜索引擎爬虫的爬取频率比
2012-09-28 11:22:09 841
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人