有些站长比较喜欢将站点上线测试(不喜欢在本地测试),但是又不想被百度等搜索引擎抓取,那么应该怎么暂时屏蔽呢?今天 boke112 就跟大家简单介绍几种方法。
方法一:
WordPress 站点可以直接登录站点后台 >> 设置 >> 阅读 >> 勾选“建议搜索引擎不索引本站点”并点击【保存更改】即可。
方法二:
直接在网站根目录中新建一个 robots.txt 文件,然后在文件中添加以下代码:
User-Agent: *
Disallow: /
方法三:
通过 noindex 标记来禁止,直接在站点的头文件 header.php 文件中添加以下代码:
<meta name="robots" content="noindex" >
方法四:
通过 PHP 代码禁止(wordpress 站点为例),将以下代码添加到主题目录的 functions.php 当中:
ob_start("Deny_Spider_Advanced");
function Deny_Spider_Advanced() {
$UA = $_SERVER['HTTP_USER_AGENT'];
$Spider_UA = '/(spider|bot|)/i'; //定义需要禁止的蜘蛛 UA,一般是 spider 和 bot
//如果检测到 UA 不为空而且发现是蜘蛛则返回 404
if($UA