Google (谷歌)中国的博客网志

转载 2011年01月25日 12:56:00

整合网站重复内容

原文:Reunifying duplicate content on your website

转载自:Google 中文网站站长博客


处理网站上的重复内容是一项非常困难的工作。随着网站的发展,必须不断增加、改变或删除各种功能;与此同时,不同的网站内容来了又去。一段时间后,许多网站都会有以多个URL网址形式存在的系统化垃圾代码,这些URL都返回同样的内容。在一般情况下,除了会增加搜索引擎的抓取和索引内容的难度以外,你的网站上存在重复内容并不构成问题。此外,通过导入链接而得到的PageRank以及类似信息可能会在我们尚未确定为重复内容的网页间扩散,导致你的首选网页在谷歌中的排名降低。

处理你的网站内部重复内容的步骤


识别网站上的重复内容。
识别你网站上的重复内容是处理重复内容的第一步,也是最重要的一步。使用一种简单的方法可以实现这个目的,即从网页中选取一段独特的文本代码,然后搜索这段文本,并使用谷歌的site:query将搜索结果限制为自己网站上的网页。如此以来,搜索出的含有同样内容的多个结果就是你需要处理的重复内容。

确定你需要的首选URL网址。
在处理重复内容之前,必须确保你的首选URL网址结构。对于这段内容,你希望使用哪一个URL网址?

保持网站内部的统一性。
选择首选网址之后,确保在你的网站内所有可能的位置上使用他们(包括你的Sitemap文件)。

在必要和可能的情况下使用301永久重定向。
可能的话,可以使用301代码将重复网址重新定向为你选择的网址。此举能够帮助用户和搜索引擎在访问重复URL网址时找到你的首选URL网址。如果你的网站有数个域名,可选择一个域名,使用将其他域名301重定向到这个域名,同时还要确保其转向正确的特定网页,而不仅是域根目录。如果网站同时支持www和非www主机名,可选择其中一种,使用Google网站站长工具中的首选域设置,再进行适当的重定向。

在可能的情况下,在你网页上使用rel="canonical"
在无法使用301重定向的情况下,可以使用rel="canonical",以方便搜索引擎更好地理解你的网站和首选URL网址。Ask.comBingYahoo!等主要搜索引擎都支持这种链接标签的使用。

可能的情况下,在Google网站站长工具中使用URL参数处理工具
如果部分或全部网站重复内容来自带有查询参数的URL网址,则此工具将帮助你将URL内的重要参数和不相关参数通知我们。有关此工具的详细信息可参见我们的博客声明

 

怎样处理robots.txt文件?

使用robots.txt文件来禁止对重复内容进行抓取不在我们推荐的方法之内。我们建议你不要使用robots.txt文件或其他方式来禁止对你网站上的重复内容的访问。你可以使用rel="canonical" 链接标签URL参数处理工具301重定向。如果完全阻止了对重复内容的访问,搜索引擎必须将这些URL作为独立的不同网页处理,因为它们无法分辨出这些URL其实只是指向相同内容的不同网址。更好的解决方法是允许对其进行抓取,同时用我们推荐的方法将这些URL网址明确标记为重复内容。如果你允许我们访问这些URL网址,Google抓取机器人将学会通过查看URL确定其是否为重复内容,在各种情况下都能很好地避免不必要的重复爬行抓取。为了防止重复内容仍然引导我们过多地爬行搜索你的网站,你还可以调整Google网站站长工具里的抓取速度

我们希望这些方法能够帮助控制你的网站上的重复内容。你也可登录我们的帮助中心查看有关重复内容的基本信息。如有任何问题,欢迎你随时进入Google网站站长帮助论坛参加讨论。

原文地址:http://www.google.com.hk/ggblog/googlechinablog/2010/01/blog-post_8816.html

7年之后,Google终于以这种方式回归中国了

热文导读 | 点击标题阅读Android全面拥抱AI:Google推AI版的Android 8.1和Oreo Go版,附新特性详解吊炸天!74款APP完整源码!【重磅推荐】精品项目实战—高仿支付宝,附...
  • xJ032w2j4cCjhOW8s8
  • xJ032w2j4cCjhOW8s8
  • 2017年12月14日 00:00
  • 663

谷歌为什么必须回归中国

你一定还记得在 2010 年,谷歌在一阵喧闹之中离开了中国。那时的中国互联网一片唱衰之声,认为这件事情对于中国互联网来说,是一种倒退,也是一种不可弥补的遗憾。但也有人将多年前那段李维斯和中国的往事重提...
  • Tomorrow_csdn
  • Tomorrow_csdn
  • 2017年06月22日 11:12
  • 1825

Google开发者大会给我们带来了什么?

Google开发者大会给我们带来了什么?和没带来什么?
  • xiaole0313
  • xiaole0313
  • 2016年12月08日 19:20
  • 990

积极重返中国的谷歌,这次瞄准了AI入口

编译 | 项文虎 张震 作者 | Mark Bergen, David Ramli 来源 | Bloomberg 退出中国市场七年之后,谷歌正在积极重返大陆。 不过,谷歌...
  • Uwr44UOuQcNsUQb60zk2
  • Uwr44UOuQcNsUQb60zk2
  • 2017年11月01日 06:38
  • 65

Google高级搜索命令

一、site,指定搜索的某個網站。例:desire site:bbs.gfan.com 二、filetype,指定搜索的文件類型。例:seo filetype:doc 三、双引号,代表完全匹配,使关键...
  • shuimuzy
  • shuimuzy
  • 2017年02月17日 10:29
  • 781

想加入Google AI中国团队?你可能得飞去美国面试

李根 发自 虹桥机场 量子位 报道 | 公众号 QbitAI如何加入李飞飞带领的Google AI中国团队?不用在线等,也不用急。量子位多方打探权威信息,独家整理了一份Google AI中国中心应聘指...
  • yH0VLDe8VG8ep9VGe
  • yH0VLDe8VG8ep9VGe
  • 2017年12月14日 00:00
  • 619

Google和必应都无法替代的10大深网搜索引擎

当我们想要搜索某些内容时,我们第一个想到的就是打开Google、百度或必应这类的搜索引擎。但针对有些内容,却是这些常规搜索引擎无法获取到的,那就是隐藏在深网的内容。据不完全统计,深网的信息量为表层网络...
  • ejinxian
  • ejinxian
  • 2017年07月01日 22:35
  • 1685

Google Play应用商店开发者账号绑定信用卡(银行卡)

应用商店开发者账号注册过程中,需要绑定一张信用卡,用来支付25美刀的注册费用。由于绑定的信用卡不支持中国大陆地区,给很多想注册Google Play开发者账号的同行带来了很多麻烦,这里收集了一些其他同...
  • ElyXiao
  • ElyXiao
  • 2016年04月08日 11:59
  • 8035

如何向网页中嵌入谷歌英文地图

谷歌地图可以很方便的生成嵌入地图,但是如何强制显示语言为英文呢?本文给出了两种解决方案。...
  • lotusiki
  • lotusiki
  • 2017年07月04日 21:20
  • 1451

Google Gson官方教程

Google gson
  • yang786654260
  • yang786654260
  • 2015年03月06日 16:40
  • 3376
内容举报
返回顶部
收藏助手
不良信息举报
您举报文章:Google (谷歌)中国的博客网志
举报原因:
原因补充:

(最多只允许输入30个字)