1. <!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-transitional.dtd"> 
  2. <html xmlns="http://www.w3.org/1999/xhtml"> 
  3. <head> 
  4. <title>无标题文档</title> 
  5. <meta http-equiv="Content-Type" content="text/html; charset=gb2312" /> 
  6. <link rel="stylesheet" type="text/css" href="/c3.css" />  
  7. <meta http-equiv="Content-Type" content="text/html; charset=gb2312" />  
  8. <meta http-equiv="Content-Language" content="zh-cn" />  
  9. <meta name="robots" content="all" />  
  10. <meta name="author" content="lunanzuche.com" />  
  11. <meta name="Copyright" content="Copyright www.lunanzuche.com All Rights Reserved." />  
  12. <meta name="MSSmartTagsPreventParsing" content="true" />  
  13. <meta http-equiv="p_w_picpathtoolbar" content="false" />  
  14.  
  15. </head> 
  16.  
  17. <body> 
  18. <?PHP 
  19. /** 
  20. * 判断是否为搜索引擎蜘蛛 
  21. * 
  22. * @author Eddy 
  23. * @return bool 
  24. */ 
  25. function isCrawler(){ 
  26. $agent= strtolower($_SERVER['HTTP_USER_AGENT']); 
  27. if (!empty($agent)) { 
  28. $spiderSite= array( 
  29. "TencentTraveler", 
  30. "Baiduspider+", 
  31. "BaiduGame", 
  32. "Googlebot", 
  33. "msnbot", 
  34. "Sosospider+", 
  35. "Sogou web spider", 
  36. "ia_archiver", 
  37. "Yahoo! Slurp", 
  38. "YoudaoBot", 
  39. "Yahoo Slurp", 
  40. "MSNBot", 
  41. "Java (Often spam bot)", 
  42. "BaiDuSpider", 
  43. "Voila", 
  44. "Yandex bot", 
  45. "BSpider", 
  46. "twiceler", 
  47. "Sogou Spider", 
  48. "Speedy Spider", 
  49. "Google AdSense", 
  50. "Heritrix", 
  51. "Python-urllib", 
  52. "Alexa (IA Archiver)", 
  53. "Ask", 
  54. "Exabot", 
  55. "Custo", 
  56. "OutfoxBot/YodaoBot", 
  57. "yacy", 
  58. "SurveyBot", 
  59. "legs", 
  60. "lwp-trivial", 
  61. "Nutch", 
  62. "StackRambler", 
  63. "The web archive (IA Archiver)", 
  64. "Perl tool", 
  65. "MJ12bot", 
  66. "Netcraft", 
  67. "MSIECrawler", 
  68. "WGet tools", 
  69. "larbin", 
  70. "Fish search", 
  71. ); 
  72.     foreach($spiderSite as $val) { 
  73.         $str = strtolower($val); 
  74.         if (strpos($agent, $str) !== false) { 
  75.         return true; 
  76.         } 
  77.     } 
  78. }else { 
  79.     return false; 
  80.     } 
  81. }  
  82. ?> 
  83. </body> 
  84. </html> 
 
  
以上主要就是根据函数进行判断