php采集回调

最新推荐文章于 2018-01-18 16:54:06 发布

泽亮鱼

最新推荐文章于 2018-01-18 16:54:06 发布

阅读量322

点赞数

分类专栏：代码

本文链接：https://blog.csdn.net/wendi_0506/article/details/52984108

版权

代码专栏收录该内容

24 篇文章 1 订阅

订阅专栏

<?php
include('CURL.php');
$db=new PDO('mysql:dbname=haicheji;host=localhost','root','123456');
$db->exec("set names utf8");
$curl=new CUrl();

$curl->task='demo4_addTask';
$curl->go();

//取还没有添加的任务
function demo4_addTask(){
	global $baseUrl,$db,$curl;
	static $lastId=0;
	$limit=100;
	$list=$db->query("select id,url from html where id>$lastId and tag is null order by id limit $limit")->fetchAll();
	if(count($list)>0){
		foreach($list as $v){
			$url=array($v['url']);
			$callback=array('demo4_cb1',array($v['id']));
			$curl->add($url,$callback);
		}
		$lastId=$v['id'];
	}
	else $lastId=$lastId+1;
}

//处理回调函数
function demo4_cb1($r,$id){
	global $db,$curl;
	if($r['info']['http_code']==200){
		$html=$r['content'];
		$rs=$db->prepare("update html set html=?,tag=1 where id=?");
		$rs->execute(array($html,$id));
	}
	$curl->status();
}