snoopy
happylifeng
这个作者很懒,什么都没留下…
展开
-
PHP采集利器snoopy应用详解
Snoopy是一个php类,用来模拟浏览器的功能,可以获取网页内容,发送表单。Snoopy正确运行需要你的服务器的PHP版本在4以上,并且支持PCRE(Perl Compatible Regular Expressions),基本的LAMP服务都支持。 一、Snoopy的一些特点: 1.抓取网页的内容 fetch 2.抓取网页的文本内容 (去除HTML标签) fetchtext ...原创 2012-11-09 13:24:43 · 95 阅读 · 0 评论 -
解决php snoopy远程获取数据的稳定性问题
使用php snoopy在获取远程数据的时候,经常遇到远程站点不稳定或者是网络因素影响,造成读取数据失败或者返回时间过长的问题,本篇文章着重介绍一下大致的解决思路。 前段时间利用沈阳交通违章查询网的接口,做了一个简单的违章查询系统,并且在数据远程获取之前进行了缓存,开始设置的缓存时间为3天(因为沈阳交通违章查询网的数据每周更新一次)。这样运行了将尽3个月的时间,通过长时间的观察,发现交警...原创 2013-01-14 15:53:53 · 399 阅读 · 0 评论