- 博客(2)
- 收藏
- 关注
转载 互联网网站的反爬虫策略浅析
转载来自:http://robbin.iteye.com/blog/451014 因为搜索引擎的流行,网络爬虫已经成了很普及网络技术,除了专门做搜索的Google,Yahoo,微软,百度以外,几乎每个大型门户网站都有自己的搜索引擎,大大小小叫得出来名字得就几十种,还有各种不知名的几千几万种,对于一个内容型驱动的网站来说,受到网络爬虫的光顾是不可避免的。 一些智能的搜索引擎爬虫的爬取频率比
2013-01-14 17:58:38 400
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人