让蜘蛛和用户访问不同的界面，用PHP curl检测有没有成功

最新推荐文章于 2021-04-27 14:01:09 发布

跑不过就算我捡的

最新推荐文章于 2021-04-27 14:01:09 发布

阅读量721

点赞数

分类专栏： SEO 文章标签： php seo

原文链接：http://blog.sina.com.cn/s/blog_ac9074a201018dn3.html

版权

SEO 专栏收录该内容

2 篇文章 1 订阅

订阅专栏

<?php
// 下面是一些常见的蜘蛛名
$flag = false;
$tmp = $_SERVER['HTTP_USER_AGENT'];
if(strpos($tmp, 'Googlebot') !== false){
    $flag = true;
} else if(strpos($tmp, 'Baiduspider') >0){
    $flag = true;
} else if(strpos($tmp, 'Yahoo! Slurp') !== false){
    $flag = true;
} else if(strpos($tmp, 'msnbot') !== false){
    $flag = true;
} else if(strpos($tmp, 'Sosospider') !== false){
    $flag = true;
} else if(strpos($tmp, 'YodaoBot') !== false || strpos($tmp, 'OutfoxBot') !== false){
    $flag = true;
} else if(strpos($tmp, 'Sogou web spider') !== false || strpos($tmp, 'Sogou Orion spider') !== false){
    $flag = true;
} else if(strpos($tmp, 'fast-webcrawler') !== false){
    $flag = true;
} else if(strpos($tmp, 'Gaisbot') !== false){
    $flag = true;
} else if(strpos($tmp, 'ia_archiver') !== false){
    $flag = true;
} else if(strpos($tmp, 'altavista') !== false){
    $flag = true;
} else if(strpos($tmp, 'lycos_spider') !== false){
    $flag = true;
} else if(strpos($tmp, 'Inktomi slurp') !== false){
    $flag = true;
}
if($flag == false){
   //正常用户代码
   echo "this is user";
} else {
   //蜘蛛处理代码
   echo "this is spider";
}
?>

如何检测有没有成功了？

这里用到PHP的curl函数
代码如下:
需要开启PHP CURL支持

<?php
$url="http://xxxxx"; //上面代码保存的路径
$ch = curl_init(); 
curl_setopt($ch,CURLOPT_URL,$url);
//curl_setopt($ch,CURLOPT_HTTPHEADER,array("User-Agent: Mozilla/5.0 (Windows NT 6.1; rv:14.0) Gecko/20100101 Firefox/14.0.1"));  //用这个是正常用户，用下面的百度蜘蛛
curl_setopt($ch,CURLOPT_HTTPHEADER,array("User-Agent: Baiduspider")); 
curl_exec($ch);
curl_close($ch);

?>