php简单采集代码,PHP采集器的简单示例代码

/**

* 采集器代码一例

* by www.jbxue.com

*/

$url = "http://book.sina.com.cn/nzt/lit/zhuxian2/index.shtml";// 图书地址

$ver = "old"; //新旧版本

$r = file_get_contents($url); //用file_get_contents将网址打开并读取所打开的页面的内容

preg_match("//is",$r,$booktitle);//匹配此页面的标题

$bookname = $booktitle[1];//取第二层数组

$preg = '/

/isU';

preg_match_all($preg, $r, $zj); //将此页面的章节连接匹配出来

$bookzj = count($zj[1]);// 计算章节标题数量

if ($ver=="new"){

$content_start = "";

$content_end = "";

}

if ($ver=="old"){

$content_start = "";

$content_end = "
";

}

header("Content-Type:text/html;charset=gb2312");

writer($bookname." 共".$bookzj."节\r\n帅哥刘并于".date("D M j G:i:s T Y")."为了毕业而设计小说整理收集\r\n", "./ailaopo/".$bookname.".txt","w+");

for ($i=0;$i

//echo "http://book.sina.com.cn".$zj[1][$i]".shtml";die();

//用file_get_contents将章节连接打开并读取所打开的页面的内容

$str = file_get_contents("http://book.sina.com.cn".$zj[1][$i].".shtml");

preg_match("/(

)(.*?)()/is",$str,$title);//匹配此连接页面的标题

$title = str_replace("_读书频道_新浪网","",$title[2]);//把$title[2]里面有_读书频道_新浪网的换成空

preg_match("/(".$content_start.")(.*?)(".$content_end.")/is",$str,$content);//匹配此连接页面的内容

$content = preg_replace("//s","",str_replace("

","\r\n",$content[2]));//用str_replace把$content[2]里有 的换成\r\n

print_r($content);

exit;

//把第".($i+1)."节和标题与内容连接在一起放在变量

$result = " \r\n第".($i+1)."节--------".$title."_汪老师就是帅 --------- \r\n".$content;

writer($result, "./ailaopo/".$bookname.".txt","a+");//调用函数把$result

echo "小说".$bookname."共".$bookzj."节，现在整理到第".$i."节 _".$title."
";

}

echo "小说".$bookname."共".$bookzj."节 已全部整理完成！";

function writer($content,$url,$mode)//定义函数名 writer 参数$content,$url,$mode

{

$fp = fopen($url, $mode);//打开文件$url

fwrite($fp, $content);//把$content放入到$fp

fclose($fp); //关闭$fp

}

?>