分布式
zjren-hhit
这个作者很懒,什么都没留下…
展开
-
分布式爬虫入门
来源:http://www.cnblogs.com/yueyue_jwfm/archive/2010/04/11/1709821.html 一、 研究所属范围 分布式网络爬虫包含多个爬虫,每个爬虫需要完成的任务和单个的爬行器类似,它们从互联网上下载网页,并把网页保存在本地的磁盘,从中抽取URL并沿着这些URL的指向继续爬行。由于并行爬行器需要分割下载任务,可能爬虫会将自己抽取的URL发送给转载 2015-06-25 11:09:03 · 825 阅读 · 1 评论 -
Nginx搭建———LNMP环境搭建篇
1.Nginx配置文件测试 root@kallen:/usr/local/nginx/sbin# nginx -t nginx: the configuration file /etc/nginx/nginx.conf syntax is ok nginx: configuration file /etc/nginx/nginx.conf test is successful123 2转载 2015-06-30 11:04:48 · 524 阅读 · 0 评论