php 优化页面输出，兼容搜索引擎机器人访问的实例

最新推荐文章于 2021-04-02 08:19:51 发布
最新推荐文章于 2021-04-02 08:19:51 发布
阅读量1.7w 收藏
点赞数 1
分类专栏： php 文章标签： php 搜索引擎 机器人 ajax 优化
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/fdipzone/article/details/53868665
版权

使用php输出页面，如果页面的内容很多，用户需要等待页面所有内容加载后才可以看到页面内容，用户体验不好。

1.页面输出优化方法

我们可以把页面内容分成几块，异步并发请求加载，当任何一块内容加载成功后即时显示，而不需要等待其他分块的内容加载。
这样只要有任何一块内容加载成功，用户都可以马上看到，提升用户体验。

因此页面中只需要保留js内容，使用ajax请求api加载内容显示。

<!-- 分块1 -->
<div id="result1"></div>
<script type="text/javascript">
$(function() {
  $.get("api.php?id=1", {}, function(ret) {
    $("#result1").html(ret["html"]);
  },"json");
});
</script>

<!-- 分块2 -->
<div id="result2"></div>
<script type="text/javascript">
$(function() {
  $.get("api.php?id=2", {}, function(ret) {
    $("#result2").html(ret["html"]);
  },"json");
});
</script>

<!-- 分块3 -->
<div id="result3"></div>
<script type="text/javascript">
$(function() {
  $.get("api.php?id=3", {}, function(ret) {
    $("#result3").html(ret["html"]);
  },"json");
});
</script>
...

这里写图片描述

异步并发加载内容，可以大大加快页面输出速度。

2.页面输出兼容搜索引擎

如果使用异步并发加载方式输出页面，对于搜索引擎不友好，搜索引擎会采集不到内容，因为内容都是使用ajax加载。

因此我们需要判断如果是搜索引擎机器人访问时，则直接输出页面内容，而不使用异步并发输出页面。

判断是否搜索引擎机器人访问方法

<?php
// 判断是否搜索引擎机器人访问
function isRobot() { 
    $agent= strtolower(isset($_SERVER['HTTP_USER_AGENT'])? $_SERVER['HTTP_USER_AGENT'] : ''); 
    if(!empty($agent)){ 
        $spiderSite= array( 
            "TencentTraveler", 
            "Baiduspider+", 
            "BaiduGame", 
            "Googlebot", 
            "msnbot", 
            "Sosospider+", 
            "Sogou web spider", 
            "ia_archiver", 
            "Yahoo! Slurp", 
            "YoudaoBot", 
            "Yahoo Slurp", 
            "MSNBot", 
            "Java (Often spam bot)", 
            "BaiDuSpider", 
            "Voila", 
            "Yandex bot", 
            "BSpider", 
            "twiceler", 
            "Sogou Spider", 
            "Speedy Spider", 
            "Google AdSense", 
            "Heritrix", 
            "Python-urllib", 
            "Alexa (IA Archiver)", 
            "Ask", 
            "Exabot", 
            "Custo", 
            "OutfoxBot/YodaoBot", 
            "yacy", 
            "SurveyBot", 
            "legs", 
            "lwp-trivial", 
            "Nutch", 
            "StackRambler", 
            "The web archive (IA Archiver)", 
            "Perl tool", 
            "MJ12bot", 
            "Netcraft", 
            "MSIECrawler", 
            "WGet tools", 
            "larbin", 
            "Fish search", 
        ); 
        foreach($spiderSite as $val){ 
            $str = strtolower($val); 
            if(strpos($agent, $str) !== false){ 
                return true; 
            } 
        } 
    }

    return false; 
} 
?>


3.完整代码及测试

index.php 用于被访问

<?php
require 'server.php';

// 获取内容
$data1 = getData(1);
$data2 = getData(2);
$data3 = getData(3);

// 调用模版
include dirname(__FILE__).'/template.php';
?>

template.php 页面模版内容

<!DOCTYPE HTML PUBLIC "-//W3C//DTD HTML 4.01 Transitional//EN" "http://www.w3.org/TR/html4/loose.dtd">
<html>
 <head>
  <meta http-equiv="content-type" content="text/html;charset=utf-8">
  <script src="jquery-1.11.0.min.js"></script>
  <title>内容模版</title>
 </head>

 <body>
    <?php echo $data1; ?>
    <?php echo $data2; ?>
    <?php echo $data3; ?>
 </body>
</html>

server.php 获取内容主要方法

<?php
//获取数据，正常情况应该读取db，演示只用数组代替
function getData($id){

    // 数据
    $data = array(
        1 => '很久很久以前，在某个地方，有个很可爱的女孩。不幸的是，她父母双亡，而且家徒四壁，屋里除了一张可供歇息的床以外，就别无长物了。除此之外，她全身上下只剩下身上所穿的衣裳，还有一片好心人施舍给她有面包而已。这个小姑娘，是个心地善良、信心坚定的好女孩。不论境遇有多么凄惨不幸，她仍然深信，慈爱的上帝会默默地庇护着她。',
        2 => '有一天，她只身上原野上去玩。她走着走着，忽然遇到一个衣衫褴褛的男子。他向女孩哀求道：“求求你!施舍一点东西给我这个可伶人吧!我实在是饿得快要受不了了啊!”听到这话，女孩便把自己仅有的那片面包拿出来，说道：“这是上帝的恩 典喔!”说完后， 女孩就继续上路了。走了一会儿，路旁突然出现了一个啼泣不已的男孩。“鸣——我的头好冷呀!就快冻僵了……你能不能施舍一点可以让我挡风的东西啊！”女孩便把自己头上那顶帽子脱了下来， 为男孩戴上。走了不久，她又碰到一个小孩。那孩子没有穿棉背心，冷得直打哆嗦。于是，好心的女孩便把自己的背心送给那个小孩。她继续往前走，突然又遇见另一个小孩。她再次答应对方的乞求，把上衣施舍给他。女孩再往前走，走进森林里。林深日尽，四周一下子变暗了起来。这时，又出现一个可怜的小男孩， 央求女孩把内衣脱给她。这个时候，虔诚又善良的女孩想：“现在天色已经暗下来了，任谁也看不清楚我的模样，就算脱掉内衣，应该无所谓吧！”因此，女孩脱下了内衣，送给乞讨的女孩。',
        3 => '这个时候的女孩，真的是浑身赤裸、再无他物了。忽然间，天上闪烁的星星纷纷坠落，落在女孩的面前。天啊!它们都化成了闪亮耀眼的金币——货真价实的金币!而原先一丝不挂的孩，不知什么时候，竟裹上了一套细致、上等的亚麻衫!于是，这个好心的女孩，把金币捡回家，从此过着富足、快乐的生活。'
    );

    $ret = '';

    // 判断是否搜索引擎机器人
    $is_robot = isRobot();

    // 搜索引擎机器人访问
    if($is_robot || defined('FORCE_SYNC_RESPONSE') && FORCE_SYNC_RESPONSE==true){

        $ret .= '<p>'.$data[$id].'</p>'.PHP_EOL;

    // 普通用户访问，异步请求
    }else{

        $ret = '<div id="result'.$id.'"></div>
        <script type="text/javascript">
        $(function() {
          $.get("api.php?id='.$id.'", {}, function(ret) {
            $("#result'.$id.'").html(ret["html"]);
          },"json");
        });
        </script>'.PHP_EOL.PHP_EOL;

    }

    return $ret;

}

// 判断是否搜索引擎机器人访问
function isRobot() { 
    $agent= strtolower(isset($_SERVER['HTTP_USER_AGENT'])? $_SERVER['HTTP_USER_AGENT'] : ''); 
    if(!empty($agent)){ 
        $spiderSite= array( 
            "TencentTraveler", 
            "Baiduspider+", 
            "BaiduGame", 
            "Googlebot", 
            "msnbot", 
            "Sosospider+", 
            "Sogou web spider", 
            "ia_archiver", 
            "Yahoo! Slurp", 
            "YoudaoBot", 
            "Yahoo Slurp", 
            "MSNBot", 
            "Java (Often spam bot)", 
            "BaiDuSpider", 
            "Voila", 
            "Yandex bot", 
            "BSpider", 
            "twiceler", 
            "Sogou Spider", 
            "Speedy Spider", 
            "Google AdSense", 
            "Heritrix", 
            "Python-urllib", 
            "Alexa (IA Archiver)", 
            "Ask", 
            "Exabot", 
            "Custo", 
            "OutfoxBot/YodaoBot", 
            "yacy", 
            "SurveyBot", 
            "legs", 
            "lwp-trivial", 
            "Nutch", 
            "StackRambler", 
            "The web archive (IA Archiver)", 
            "Perl tool", 
            "MJ12bot", 
            "Netcraft", 
            "MSIECrawler", 
            "WGet tools", 
            "larbin", 
            "Fish search", 
        ); 
        foreach($spiderSite as $val){ 
            $str = strtolower($val); 
            if(strpos($agent, $str) !== false){ 
                return true; 
            } 
        } 
    }

    return false; 
} 
?>

api.php 异步请求使用的api接口

<?php
define('FORCE_SYNC_RESPONSE', true); // 强制同步输出

require 'server.php';

// 获取分块内容
$id = isset($_GET['id'])? $_GET['id'] : 1;
$data = getData($id);

// 输出
header('content-type:application/json;charset=utf8');
$ret = json_encode(
    array(
        'html' => $data
    )
);

echo $ret;
?>


测试正常用户访问

<?php
$url = 'http://localhost/index.php'; // 访问index.php
$header = array();
$data = doCurl($url, array(), $header);
echo '<meta http-equiv="content-type" content="text/html;charset=utf-8">';
echo '<xmp>';
echo $data;
echo '</xmp>';

/**
 * curl请求
 * @param  String $url     请求地址
 * @param  Array  $data    请求参数
 * @param  Array  $header  请求header
 * @param  Int    $timeout 超时时间
 * @return String
 */
function doCurl($url, $data=array(), $header=array(), $timeout=30){  

    $ch = curl_init();
    curl_setopt($ch, CURLOPT_URL, $url);
    curl_setopt($ch, CURLOPT_HTTPHEADER, $header);
    curl_setopt($ch, CURLOPT_RETURNTRANSFER, true);
    curl_setopt($ch, CURLOPT_FOLLOWLOCATION, true);
    curl_setopt($ch, CURLOPT_TIMEOUT, $timeout);

    $response = curl_exec($ch);  

    if($error=curl_error($ch)){  
        die($error);
    }  

    curl_close($ch);  

    return $response;
}  
?>

输出页面内容

<!DOCTYPE HTML PUBLIC "-//W3C//DTD HTML 4.01 Transitional//EN" "http://www.w3.org/TR/html4/loose.dtd">
<html>
 <head>
  <meta http-equiv="content-type" content="text/html;charset=utf-8">
  <script src="jquery-1.11.0.min.js"></script>
  <title>内容模版</title>
 </head>

 <body>
    <div id="result1"></div>

        <script type="text/javascript">
        $(function() {
          $.get("api.php?id=1", {}, function(ret) {
            $("#result1").html(ret["html"]);
          },"json");
        });
        </script>
    <div id="result2"></div>

        <script type="text/javascript">
        $(function() {
          $.get("api.php?id=2", {}, function(ret) {
            $("#result2").html(ret["html"]);
          },"json");
        });
        </script>
    <div id="result3"></div>

        <script type="text/javascript">
        $(function() {
          $.get("api.php?id=3", {}, function(ret) {
            $("#result3").html(ret["html"]);
          },"json");
        });
        </script>
 </body>
</html>

使用了异步并发加载，提高页面输出速度。

测试搜索引擎机器人访问

<?php
$url = 'http://localhost/index.php'; // 访问index.php
$header = array(
    'user-agent: Googlebot' // 加入搜索引擎关键字
);
$data = doCurl($url, array(), $header);
echo '<meta http-equiv="content-type" content="text/html;charset=utf-8">';
echo '<xmp>';
echo $data;
echo '</xmp>';

/**
 * curl请求
 * @param  String $url     请求地址
 * @param  Array  $data    请求参数
 * @param  Array  $header  请求header
 * @param  Int    $timeout 超时时间
 * @return String
 */
function doCurl($url, $data=array(), $header=array(), $timeout=30){  

    $ch = curl_init();
    curl_setopt($ch, CURLOPT_URL, $url);
    curl_setopt($ch, CURLOPT_HTTPHEADER, $header);
    curl_setopt($ch, CURLOPT_RETURNTRANSFER, true);
    curl_setopt($ch, CURLOPT_FOLLOWLOCATION, true);
    curl_setopt($ch, CURLOPT_TIMEOUT, $timeout);

    $response = curl_exec($ch);  

    if($error=curl_error($ch)){  
        die($error);
    }  

    curl_close($ch);  

    return $response;
}  
?>

输出页面内容

<!DOCTYPE HTML PUBLIC "-//W3C//DTD HTML 4.01 Transitional//EN" "http://www.w3.org/TR/html4/loose.dtd">
<html>
 <head>
  <meta http-equiv="content-type" content="text/html;charset=utf-8">
  <script src="jquery-1.11.0.min.js"></script>
  <title>内容模版</title>
 </head>

 <body>
    <p>很久很久以前，在某个地方，有个很可爱的女孩。不幸的是，她父母双亡，而且家徒四壁，屋里除了一张可供歇息的床以外，就别无长物了。除此之外，她全身上下只剩下身上所穿的衣裳，还有一片好心人施舍给她有面包而已。这个小姑娘，是个心地善良、信心坚定的好女孩。不论境遇有多么凄惨不幸，她仍然深信，慈爱的上帝会默默地庇护着她。</p>
    <p>有一天，她只身上原野上去玩。她走着走着，忽然遇到一个衣衫褴褛的男子。他向女孩哀求道：“求求你!施舍一点东西给我这个可伶人吧!我实在是饿得快要受不了了啊!”听到这话，女孩便把自己仅有的那片面包拿出来，说道：“这是上帝的恩 典喔!”说完后， 女孩就继续上路了。走了一会儿，路旁突然出现了一个啼泣不已的男孩。“鸣——我的头好冷呀!就快冻僵了……你能不能施舍一点可以让我挡风的东西啊！”女孩便把自己头上那顶帽子脱了下来， 为男孩戴上。走了不久，她又碰到一个小孩。那孩子没有穿棉背心，冷得直打哆嗦。于是，好心的女孩便把自己的背心送给那个小孩。她继续往前走，突然又遇见另一个小孩。她再次答应对方的乞求，把上衣施舍给他。女孩再往前走，走进森林里。林深日尽，四周一下子变暗了起来。这时，又出现一个可怜的小男孩， 央求女孩把内衣脱给她。这个时候，虔诚又善良的女孩想：“现在天色已经暗下来了，任谁也看不清楚我的模样，就算脱掉内衣，应该无所谓吧！”因此，女孩脱下了内衣，送给乞讨的女孩。</p>
    <p>这个时候的女孩，真的是浑身赤裸、再无他物了。忽然间，天上闪烁的星星纷纷坠落，落在女孩的面前。天啊!它们都化成了闪亮耀眼的金币——货真价实的金币!而原先一丝不挂的孩，不知什么时候，竟裹上了一套细致、上等的亚麻衫!于是，这个好心的女孩，把金币捡回家，从此过着富足、快乐的生活。</p>
 </body>
</html>

页面内容直接输出，对搜索引擎友好。


源码下载地址：点击查看

傲雪星枫
关注
  • 1
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
php 搜索引擎优化
08-03
php代码实现搜索引擎优化，对于php开发人员来说，这绝对是经典中的经典！！
JS代码根据搜索引擎来路来判断 跳转到指定页面
08-17
JS代码根据搜索引擎来路来判断 跳转到指定页面
搜索引擎优化高级编程(PHP版) 中文PDF
weixin_30650039的博客
07-17 280
搜索引擎优化高级编程(PHP版) 中文PDF 转载于:https://www.cnblogs.com/gavinhughhu/archive/2010/08/25/1807758.html
php 搜索引擎优化功能,如何做适度的搜索引擎优化？
weixin_39719018的博客
04-02 116
如今大家做SEO，不管是不是新手，或多或少都会听到这样一个词：适度，意思就是说做SEO要自然，不能刻意去做，这样会显得人为SEO痕迹很重，长期以往，痕迹逐渐累积，在达到一个量变的过程之后，搜索引擎会因为不信任该站点而做出处罚。那么我们应当怎样去做SEO才能适度呢？适度方位一：关键词关键词，一定要自然的融入于内容之内，不要刻意地生硬地添加进去，至于有些人经常讲的一个词语：关键词密度，这里不建议大家考...
php中seo优化怎么做,SEO技术：对于PHP页面的SEO优化
weixin_33186486的博客
03-09 804
PHP是一个快速的服务器端语言，通常用于创建MySQL的相关性和新鲜的名称和作出简单的修改，同时其相当多的脚本，使用PHP。网页的标题标记应反映在真正意义上的网页，该搜索引擎优化应该付出这个因素页上特别注意。PHP页面相比HTML静态页面进行SEO优化有或多或少的不同。一段时间，这些问题会想到许多网站管理员。如果我用我的网站PHP的发展会是搜索引擎优化兼容吗?而在PHP中如果使用POST方法，那么...
php站内搜索如何优化,网站应该怎么从内部进行优化
weixin_35696112的博客
04-02 158
网站从内部进行优化的方法：1、选购域名，选择利于用户记忆或者品牌关键词；2、选择稳定性高、安全性高的服务器；3、定位网站核心内容，确定网站的目标关键词、主要关键词等；4、规划好网站的架构和布局，网站的合理架构不仅利于用户体验，同时网站有益于搜索引擎的友好性。一个优化合理的网站，首先应该做好网站的内部优化，然后再开始实施网站的外部优化策略。通常所讲的搜索引擎优化(SEO)服务或者SEO网络优化，其实...
PHP搜索并输出到页面
01-01 277
想做个button按钮，根据框内的内容进行查找MUSQL数据库，并输出到本页面 求个源码，最好能给个已经做好的实例，这样我可以借鉴一下，界面需要美观一些 类似于这种：
ASP：判断访问是否来自搜索引擎的函数
网络Online
03-12 575
判断访问是否来自搜索引擎的函数，有兴趣的可以试试！ Chinaz^com 以下为引用的内容：检查当前用户是否是蜘蛛人Function check(user_agent)    allow_agent=split("Baiduspider,Scooter,ia_archiver,Googlebot,FAST-WebCrawle
php在当前页面搜索,PHP页面输出搜索后跳转下一页的处理方法
weixin_30951515的博客
03-21 350
php页面输出时，搜索功能在跳转下一页时，如果不做任何处理，会返回原有是第二页输出的数据，用js来给url加上搜索的条件，保证跳转下一页时输出的是搜索到的数据。以下是js代码//搜索功能$("#search").click(function() { //通过id找到搜索的input框var url = $(this).attr('url');var query = $('.search-form'...
php 判断是否是搜索引擎访问页面
08-14
php 判断是否是搜索引擎访问页面，这用于网站统计时候，区分用户还是搜索引擎
搜索引擎优化(SEO)设计指南
php菜鸟技术天地
06-02 1008
做了一个投票调查，将近10%的人不认为seo(搜索引擎优化)是设计师应该承担的责任。令我更惊讶的是甚至有24%不知道什么是seo。如果你 不了解seo是什么或者不明白seo能帮你做什么，你有必要认真的阅读一下此文章，seo搜索引擎优化对于设计师来说是有指导意义的，它可以让你的网站或 博客很容易的被搜索引擎抓取、收录。我将介绍、解释一下设计师和程序员常犯的错误。同时我提供一些基本的技巧方法，从而更好
网页减少异步加载方式，提高搜索引擎的收录率
walle的博客
11-07 898
网页内容，网页减少异步加载方式，提高搜索引擎的收录率
同步、异步方式对SEO搜索引擎优化的影响
ClaireKe的博客
10-28 3297
SEO和同步异步有什么关系呢？ 本人昨天去面试了，面试官问了这样一个问题“你知道SEO不？同步、异步对SEO有什么影响？”，我当时就懵了，这几个名词SEO、同步、异步我都知道，但是。SEO和同步异步有什么关系呢？面试官人很nice，看我扯不到点上就开始跟我讲，现在总结一下其中包含的知识点。 什么是SEO？ Search Engine Optimization，中文名叫搜索引擎优化。百
php中url怎么使用,php中url函数介绍及使用示例_PHP
weixin_33601504的博客
03-26 332
base64_encode — 使用 MIME base64 对数据进行编码base64_encode() returns 使用 base64 对 data 进行编码。设计此种编码是为了使二进制数据可以通过非纯 8-bit 的传输层传输，例如电子邮件的主体。Base64-encoded 数据要比原始数据多占用 33% 左右的空间。复制代码 代码如下:base64_decode — 对使用 MIME...
貌似走到尽头的搜索引擎优化
phphot
08-27 1937
搜索引擎优化，简称SEO(Search Engine Optimization的缩写)。对于搜索引擎优化比较科学且公认的定义是：遵循搜索引擎科学而全面的理论机制，对网站结构、网页文字语言和站点间互动外交策略等进行合理规划部署来发掘网站的最大潜力而使其在搜索引擎中具有较强的自然排名竞争优势，从而对促进企业在线销售和强化网络品牌起到作用的过程。从字面意思理解，搜索引擎优化就是针对搜索引擎的优化。比如刚
PHP+html实现搜索功能，
热门推荐
湖面上的一叶扁舟的博客
09-29 1万+
问题1、在使用PHP语言做搜索功能的时候，遇到前端传到后台的值为乱码 问题2、在进行like查询是，绑定参数报错 过程总结： 1、搜索框效果图 2、搜索框代码 &lt;div class="device_search" &gt; &lt;form action="&lt;?php echo Yii::app()-&gt;createUrl('tipe...
ＰＨＰ编制搜索引擎的一些思路
guoguo1980的专栏
08-24 3708
编者按：这是一篇精彩的编程教学文章，不但详细地剖析了 搜索引擎的原理，也提供了笔者自己对使用ＰＨＰ编制搜索引擎的一些思路。整篇文章深入浅出，相信无论是高手还是菜鸟，都能从中得到不少的启发。 　　谈到网页搜索引擎时，大多数人都会想到雅虎。的确，雅虎开创了一个互联网络的搜索时代。然而
搜索引擎优化（SEO） 基础常识
FungLeo's Blog
02-17 3546
搜索引擎优化（SEO） 基础常识 前言 在移动互联网迅猛发展的今天，各种APP、小程序满天飞，针对网页的搜索引擎优化（SEO）对于现今的企业来说已经不是头等重要的事情了。但是如果公司的SEO做得好的话，确实可以节约很大一部分宣传开支，因此，并不能说明它是完全没有作用的工作。只是在我看来，重要性确实下降了很多。 本人从事搜索引擎优化方便的研究十余载，不敢妄言大成，但总还有些心得，因此编撰此文，以期博...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值