＜meta name=“robots“ content=“index,follow“＞的解释

最新推荐文章于 2024-09-01 18:32:14 发布
最新推荐文章于 2024-09-01 18:32:14 发布
阅读量1.9k 收藏 2
点赞数 1
文章标签： html
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/m0_53372088/article/details/120613696
版权
本文详细介绍了如何使用robots标签来控制搜索引擎对网页的抓取和链接跟踪。robots标签通常放置在<head>和</head>之间，其content属性可以设置为四个不同的组合，分别控制是否允许索引和跟踪链接。了解这些设置对于网站SEO和隐私保护至关重要。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

为了让搜索引擎禁止抓取本页面

此标签必须放在< head >和< /head >之间
content中的值决定允许抓取的类型，必须同时包含两个值：是否允许索引（index）和是否跟踪链接（follow，也可以理解为是否允许沿着网页中的超级链接继续抓取）
共有四个组合：
1.index,follow:允许抓取本页，允许跟踪链接
2.index,nofollow:允许抓取本页，禁止跟踪链接
3.noindex,follow
4.noindex,nofollow
index,follow也可以写成all
< meta name=“robots” content=“all” />
noindex,follow也可以写成none
< meta name=“robots” content=“none” />

RachelCCspace
关注
html5中的meta标签robots有什么作用？
王铁柱666的博客
04-05 261
请注意，虽然大多数主流搜索引擎（如Google、Bing等）都会尊重这些指令，但并不能保证所有搜索引擎都会完全遵守。此外，这些指令只是建议性的，搜索引擎有权决定如何解释和执行它们。）用于为搜索引擎爬虫提供指令，告诉它们应如何对待和索引页面。这并不是HTML5标准的一部分，而是由搜索引擎（如Google）约定并支持的一种做法。这个文件位于网站的根目录下，并包含一组针对整个网站或特定URL模式的指令。属性一起使用，以指定一组以逗号分隔的指令。另外，还有一种更详细的方法来控制搜索引擎爬虫的行为，即使用。
<meta name="robots" content="INDEX,FOLLOW">的含义 seo
yangyun_1999的专栏
06-24 7947
robots.txt是放在网站中，文件级的网络蜘蛛授权；而robots Meta标签是放在网页中，一般用于部分网页需要单独设置的情况下。两者的功能是一样的。 Meta robots标签必须放在和之间，格式： index,follow" /> content中的值决定允许抓取的类型，必须同时包含两个值：是否允许索引（index）和是否跟踪链接（follow，也可以理解为是否允许沿着网页中的超级
网页头部meta系列用法
WEB程序员
02-20 739
有时候会有一些站点内容，不希望被ROBOTS抓取而公开。为了解决这个问题，ROBOTS开发界提供了两个办法：一个是robots.txt，另一个是The Robots META标签。1,  默认是all其中的属性说明如下： 设定为all：文件将被检索，且页面上的链接可以被查询； 设定为none：文件将不被检索，且页面上的链接不可以被查询； 设定为index：文件将被检索； 设定为follow：页面上
＜meta name=“robots“ content=““＞介绍
solocao的专栏
09-01 800
是一个 HTML 元素，用于指示搜索引擎爬虫（如 Googlebot）如何处理网页的索引和抓取。它可以控制搜索引擎对页面的访问和索引行为。），则通常表示没有特别的指示，搜索引擎将使用默认行为（通常是 index, follow）。表示搜索引擎不应索引该页面，也不应跟踪该页面上的链接。表示搜索引擎可以索引该页面，并跟踪链接。如果 content 属性为空（如。
HTML 中标签 <meta name="robots" content=""> 的含义
热门推荐
打杂人
08-18 1万+
以上的一段代码限制了所有的搜索引擎建立你的网页快照。如果我们需要仅仅限制一个搜索引擎建立快照的话，就可以像如下这样去写 　　 　　需要注意的是，这样的标记仅仅是禁止搜索引擎为你的网站建立快照，如果你要禁止搜索引擎索引你的这个页面的话，请参照后面的办法。 　　第二种情况：禁止搜索引擎抓取本页面。 　　在SEO中，禁止搜索引擎抓取本页面或者是允许搜索引擎抓取本页面是经常会用到的
网页头部<meta name="Robots" 用法 <meta系列用法.
似水流年
03-03 1548
有时候会有一些站点内容，不希望被ROBOTS抓取而公开。为了解决这个问题，ROBOTS开发界提供了两个办法：一个是robots.txt，另一个是The Robots META标签。 1,  默认是all 其中的属性说明如下：  设定为all：文件将被检索，且页面上的链接可以被查询；  设定为none：文件将不被检索，且页面上的链接不可以被查询；  设定为index：文件将被检索；
Robots Meta标签及其用法
【___小生。博客】我们一直在努力……
09-20 1058
Robots Meta应该放置在网页的什么位置呢？<br /><br />跟任何一种META标签是一样的，Robots Meta放置在HTML网页代码的HEAD之内。<br /><br /><html><br /><head><br /><meta name=”robots” content=”noindex,nofollow”><br /><meta name=”description” content=”This page ….”><br /><title>…</title><br /></head><
<meta name="robots" content="noindex, follow">
12-21
<meta name="robots" content="noindex, follow">是HTML中的一个meta标签，用于指定搜索引擎对网页的索引和跟踪行为。具体含义如下： - name属性：指定meta标签的名称为"robots"，用于告诉搜索引擎该标签的作用。 -...
<jsp:include page="${basePath}/h<meta http-equiv="pragma" content="no-cache"> <meta http-equiv="cache-control" content="no-cache"> <meta http-equiv="expires" content="0"> <meta http-equiv="keywords" content="keyword1,keyword2,keyword3"> <meta http-equiv="description" content="This is my page"> <meta name="robots" content="noindex, follow" /> <meta name="description" content=""> <meta name="viewport" content="width=device-width, initial-scale=1, shrink-to-fit=no">ome/head.jsp" flush="true"/>
最新发布
04-20
<jsp:param name="username" value="Admin"/> </jsp:include> <h1>主要内容区域</h1> </body> </html> <!-- header.jsp --> <div style="background: #eee"> <h2>欢迎用户：<%= request.getParameter("username...
<!DOCTYPE html> <html> <head> <meta http-equiv="Content-Type" content="text/html; charset=utf-8"/> <meta http-equiv="Pragma" content="public" /> <meta http-equiv="Cache-Control" content="public" /> <meta http-equiv="Cache-Control" content="must-revalidate" /> <meta http-equiv="expires" content="0"/> <meta name="robots" content="noindex"> <meta name="robots" content="nofollow"> <meta name="robots" content="noarchive"> {$IS_EmulateIE8$} <script language="javascript" src="./js/rsa.pack.js" type="text/javascript"></script> <title>{$t_strTitle$}</title> <link href="login/login.css" rel="stylesheet" type="text/css"/> <script src="js/jquery.js" type="text/javascript"></script> <script src="login/ui-main.js" type="text/javascript"></script> {$t_utf8_script_en_js$} {$t_login_href_en_css$} <script type="text/javascript"> if (!this.SF) { this.SF = {}; } this.SF.ck = "{$md5_session$}";
04-19
$$<meta charset="UTF-8">$$ 该标签定义文档的字符编码标准为UTF-8，支持全球所有语言的字符显示，包括中文、日文和特殊符号[^1] 2. **兼容性声明** $$<meta http-equiv="Content-Type" content="text/html; ...
<!doctype html> <html> <head> <meta charset="UTF-8"/> <title>仓库服务</title> <meta name="renderer" content="webkit"> <meta name="robots" content="NOINDEX,NOFOLLOW"> <meta name="viewport" content="initial-scale=1.0, minimum-scale=1.0, maximum-scale=1.0, user-scalable=no"> <meta name="apple-mobile-web-app-capable" content="yes"> <meta name="apple-mobile-web-app-status-bar-style" content="black"> <meta name="apple-mobile-web-app-title" content=""> <meta http-equiv="X-UA-Compatible" content="IE=Edge,chrome=1"> <meta http-equiv="x-dns-prefetch-control" content="on"> <meta name='aplus-version' content='aplus@202420755'> <meta name="aplus-waiting" content="MAN"> <link rel="dns-prefetch" href="//g.alicdn.com" /> <link rel="dns-prefetch" href="//img.alicdn.com" /> <link rel="dns-prefetch" href="//gw.alicdn.com" /> <link rel="dns-prefetch" href="//f.alicdn.com" /> <link rel="shortcut icon" href="//www.aliyun.com/favicon.ico" type="image/x-icon"/> <link rel="stylesheet" href="//g.alicdn.com/aisc/at/1.5.2/teambition.min.css" /> <link rel="stylesheet" href="//g.alicdn.com/ais-fed/artifacts-maven-assets/0.0.28/index.css" /> <script nonce="2d66196dbc654a48a65c00a171d3b05f"> (function(w, d, s, q, i) { w[q] = w[q] || []; var f = d.getElementsByTagName(s)[0],j = d.createElement(s); j.async = true; j.id = 'beacon-aplus'; j.src = 'https://d.alicdn.com/alilog/mlog/aplus.js?id=' + i; f.parentNode.insertBefore(j, f); })(window, document, 'script', 'aplus_queue', '202420755'); </script> </head> <body> <script type="text/javascript" nonce="2d66196dbc654a48a65c00a171d3b05f"> window.cdnPath = "//g.alicdn.com/ais-fed/artifacts-maven-assets/0.0.28/"; window.cdnVersion = "0.0.28"; </script> <script src="//g.alicdn.com/code/lib/babel-polyfill/7.6.0/polyfill.min.js" nonce="2d66196dbc654a48a65c00a171d3b05f"></script> <s
04-02
引用[3]中的例子使用了`<link>`标签加载CSS，并设置了`media="defer"`和`onload`事件来优化加载性能。而JS脚本则使用了`async`属性，实现异步加载。这些都是常见的优化手段，需要解释清楚。 另外，用户可能关心如何...
meta name="" content="的作用详细介绍
09-28
<meta name="name" content="string"/> ``` 或 ```html <meta http-equiv="http-equiv-value" content="string"/> ``` 其中，`name`和`http-equiv`是属性，`content`是对应的值。 ### 二、属性解析 **a. name项...
<meta name=＂ROBOTS＂ content=＂NOODP＂>
xunbaohe的专栏
04-14 641
正文： 问：是什么意思？ 回答： ROBOTS——机器人向导 NOODP——搜索结果中不使用 追问： 有什么作用呢， 回答： 做SEO优化用的， meta其实是html语言head区的一个辅助性标签。   其他： 一、语法： 二、参数解析： 1）name项：常用的选项有Keywords(关键字) ，descri
index、noindex、follow、nofollow的使用说明
wangshuang1631的博客
07-27 6078
爬虫是目前最常见的网络程序，曾经有过统计，说是目前的网络流量有一半以上是爬虫使用的。虽然爬虫程序随处可见，但是并不代表这种做法就是合理合法的。 在抓取网页时，我们要让自己的爬虫遵守Robot.txt协议。一般网站有两种方式声明不想被爬虫爬取按：第一种是在站点的根目录下增加一个纯文本文件，例如http://www.aaa.com/robots.txt。第二种是直接在页面中使用robots的meta标
利用 Html 元标记控制搜索引擎蜘蛛，meta name=”robots” 详解
打杂人
04-29 3711
快照不被百度缓存： ? 1 <meta name="Baiduspider" content="noarchive"> 所有搜索引擎，抓取这个页面、爬行链接、禁止快照： ? 1 <meta name="robots" content="i
SEO优化meta标签 name=＂robots＂ content=＂index,follow,noodp,noydir＂解释
Kiven's Program Space
03-23 6874
SEO优化meta标签 name=＂robots＂content=＂index,follow,noodp,noydir＂是什么意思呢，我们这就来解释一下。 name="ROBOTS"content="NOODP"> 这些元标记控制搜索引擎如何抓取和索引页。"robots"元标记指定的规则适用于所有搜索引擎，"googlebot"元标记指定的规则只适用于Google。Google可以理解以下值
有效的索引编制指令和内容显示指令
google_SEO_yang的博客
01-09 615
指令 all 对索引编制或内容显示无任何限制。该指令为默认值，因此明确列出时并无任何效果。 noindex 不在搜索结果中显示此网页、媒体或资源。如果您未指定该指令，则此网页、媒体或资源可能会编入索引并显示在搜索结果中。 nofollow 不追踪该网页上的链接。如果您未指定此指令，Google 可能会使用该网页上的链接来发现链接到的网页。 none 等同于noindex,nofollo..
Nofollow涵义
老K的博客
07-28 670
nofollow 是HTML页面中a标签的属性值。这个标签的意义是告诉搜索引擎"不要追踪此网页上的链接或不要追踪此特定链接"。 nofollow是HTML页面中a标签的属性值。它的出现为网站管理员提供了一种方式，即告诉搜索引擎"不要追踪此网页上的链接"或"不要追踪此特定链接"。这个标签的意义是告诉搜索引擎这个链接不是经过作者信任的，所以这个链接不是一个信任票。
网页头部标签说明与用法
一只胡萝卜
03-10 1075
 有时候会有一些站点内容，不希望被ROBOTS抓取而公开。为了解决这个问题，ROBOTS开发界提供了两个办法：一个是robots.txt，另一个是The Robots META标签。 1,<meta name=“Robots” contect=“all|none|index|noindex|follow|nofollow”>  默认是all 其中的属性说...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值