php更新robts_Z-blog PHP版本robots.txt的正确写法

zblog robots.txt的正确写法,php版本,robots.txt作为网站的蜘蛛抓取遵循法则,里面可以自定义需要禁止的目录,以及sitemap的附属链接都可以添加

效果:

User-agent: *

Disallow: /zb_users/

Disallow: /zb_system/

Disallow: /MemberCenter

Sitemap:meishi/sitemap_index.xml

Sitemap:xx/sitemap.xml

语法就不多说Disallow 禁止,Allow 允许,Sitemap:地图

代码:

header("Content-type: text/plain");

header('HTTP/1.1 200 OK');

$str = 'User-agent: *

Disallow: /zb_users/

Disallow: /zb_system/

Disallow: /MemberCenter

';

$str .= 'Sitemap:http://' . $_SERVER['SERVER_NAME'] . '/sitemap_index.xml

';

$str .= 'Sitemap:http://' . $_SERVER['SERVER_NAME'] . '/sitemap.xml';

echo $str;

nginx 重定向配置

rewrite ^/robots.txt$ /robots.php last;

  • 1
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值