了解重复内容、站内重复、站外抄袭,以及如何用规范标签和301重定向避免SEO处罚。

重复内容是最容易被误解的SEO概念之一。网站所有者常常担心,以为Google会因为任何重复的文字而处罚他们。实际上,重复内容要微妙得多。有些重复是无害的,甚至是意料之中的(可打印页面、移动版本)。另一些重复(抄袭、劣质转载)则可能损害排名。本指南解释什么是重复内容、它在什么情况下重要,以及如何在不伤害SEO的前提下处理它。
关键在于:重复内容本身并不是一项排名处罚。但它会让Google难以判断该给哪个版本排名,非首选版本可能被忽略。通过用规范标签和重定向表明哪个版本是首选,您就能彻底避开这个问题。
重复内容是指出现在多个页面或多个网址上的文字。它可能是有意造成的,也可能是无意的。例子包括:略有差异的产品页面(同一产品,不同颜色)、自动生成的页面、在多个网站上转载的内容、可打印版本,以及分页页面。
Google搜索中心的文档说明,重复内容不会触发全站处罚。不过,它确实会带来问题。当Google发现多个完全相同的页面时,它必须决定收录并给哪个版本排名。如果它选错了版本,您的内容排名可能达不到应有的水平。
解决办法是告诉Google哪个版本是首选。请使用规范标签、301重定向或其他信号,把重复内容合并到一个版本上。这样可以避免混淆,并把每一个排名信号都集中到首选版本上。
站内重复内容发生在您的网站内部。常见成因包括会话ID(形如?sessionid=12345的网址)、网址参数(打印版本、筛选页面)、多个域名版本(带www和不带www、http和https),以及内容管理系统生成的变体。
会话ID尤其麻烦。有些网站会为每一位访客生成唯一的会话ID,从而产生无穷无尽的重复网址。在Google看来,每一个会话ID都是不同的页面,尽管它们提供的内容完全相同。解决办法:尽量不要把会话ID放进网址(改用Cookie),用规范标签把带会话ID的网址指向干净版本,或者在robots.txt中屏蔽它们。Search Console中曾用于此目的的网址参数工具已于2022年停用。
打印页面和移动版本过去是站内重复的常见来源。如今,响应式设计和现代网页开发已在很大程度上消除了这一问题。但如果您仍然保留独立的打印版本或独立的移动网址,请把它们合并。请采用为所有设备提供单一网址的响应式设计,或者使用301重定向把流量导向您的主版本。
分类页面和标签页面往往内容相似。如果您的博客既有一个“数字营销”分类页面,又有一个“数字营销”标签页面,两者自动生成的文章列表完全相同,那您就存在站内重复。解决办法:用robots.txt屏蔽标签页面,或者在它们不能带来独特价值时使用noindex。
站外重复内容是指您的内容出现在其他网站上。它可能通过内容分发、文章转载或抄袭而发生。如果您在自己的网站上发布了一篇文章,另一个网站原封不动地转载,那么两个版本都是重复内容。
内容分发(把您的文章卖给其他出版方)在媒体行业很常见。解决办法:为分发内容设置付费墙或时间延迟。先在自己的网站上发布,等一周让Google收录您的版本,再允许分发。或者要求分发方添加指回您原文的规范标签。
抄袭则更严重。如果有人未经许可或不加署名地复制了您的内容,您的选择有限。第一,向其主机服务商发送DMCA下架通知。第二,向Google提交版权删除请求。第三,为您的原文添加规范标签,并期待Google把您的版本认定为原创。最好的防守是拥有独特的原创表达,并快速发布,让您的版本先取得排名。
规范标签会告诉搜索引擎,重复内容中哪个版本是首选版本。请把这个标签加到非首选页面的head中:<link rel="canonical" href="https://example.com/preferred-version" />。规范标签应当指向您希望被收录并获得排名的版本。每一个重复版本都应当指向这同一个版本。随后Google会把排名信号合并到规范版本上,让它更强。
Google关于规范化的文档说明,规范标签是提示,而非指令。Google通常会遵循它们,但保留在标签看起来有误时另选规范版本的权利。因此请只把规范标签放在正确的网址上。自指向的规范标签是有效的;首选页面可以有一个指向自身的规范标签。
合并重复内容最有力的方式是301重定向。当您把一个重复网址301重定向到规范版本时,全部链接权重都会流向规范版本,重复版本也就实际上被移除了。请把每一种重复格式都重定向到规范版本:带www到不带www、http到https、带斜杠到不带斜杠、参数变体,以及迁移期间的旧网址到新网址。
这会把每一个版本都合并到一个网址上。每一条链接、每一个排名信号和全部权威都会集中到这唯一的规范版本上。
如果同一份内容有多种格式(网页版、PDF版、可打印版),您有多个选择。第一,采用响应式设计,让每位用户看到适配其设备的版本。第二,用CSS隐藏打印时不需要的内容(@media print规则),这样可打印版本就不需要单独的页面。第三,如果您必须保留独立网址,请用规范标签或重定向来合并。
独立的移动网址(m.example.com)应当合并为主域名上的响应式版本。响应式设计在所有设备上只提供一个网址,从而消除重复内容。如果您必须保留独立的移动网址,请使用从移动版指向桌面版的规范标签,并用hreflang把它们连接起来。详情请参阅我们的移动优先索引指南。
劣质内容是指价值低、流于表面的重复。例子包括:只有标题和图片的自动生成产品页面、跨多个页面的截断式文章预览,以及采集站的内容。劣质内容可能触发排名处罚,与重复叠加时尤其如此。
解决办法:确保每个页面都具备实质性的独特价值。多数页面至少300词,基石内容还要更多。请加入原创信息、数据、案例和观点。请避免用模板批量生成多个低价值页面。分页页面(搜索结果的第2页、第3页)是常见的重复问题。Google自2019年起已不再使用rel="next"和rel="prev",因此请为每个分页页面设置指向自身的规范标签,并用普通的可抓取链接把这些页面连接起来,或者提供一个“查看全部”页面。
Google关于内容分发的指引承认,内容转载在媒体、出版和新闻行业确实存在。如果您的文章出现在TechCrunch上,同时又出现在另外10个出版平台上,那么每个版本都是重复内容。Google必须选出哪个版本是“原创”。在没有相反信号的情况下,Google可能会选择某个转载方而非您的原文。解决办法:与分发方协调。
请要求分发方使用指回您原文的规范标签。请协商发布时间:先在自己的网站上发布,等待7到30天完成收录,再允许分发。这能给Google时间把您的版本认定为原创。请在分发版本中保留作者署名和原文发布链接,表明您的版本才是主版本。对于全文分发,可以考虑付费或高级模式,或者为订阅者提供抢先独家访问。
请监测您的内容在全网的出现情况。为您头部文章中的特色语句设置Google快讯。如果出现抄袭或未经授权的转载,请发送DMCA下架通知。请用时间戳和元数据为您的内容留档,以证明原创创作。在内容原创性的争议中,Google的算法会考虑:首次发布日期、网站权威度、内容质量和外链档案。即便重复内容先出现在别处,强势的原创网站通常仍能保持优先地位。
请监测Search Console的网页索引编制报告中的重复页面。Google会标出它认定为重复的网址,并告诉您它选了哪个版本作为规范版本。如果Google选错了版本,请用规范标签或重定向来更正。请用site:搜索查找您网站上的重复内容。搜索site:example.com "unique phrase",看看有多少页面包含该语句。如果多个页面有相同文字,就说明您有重复问题需要处理。
请选定域名的首选版本,并自行落实。Search Console中的首选域名设置(带www或不带www)已于2019年停用,网址参数工具也已于2022年停用,因此Google不再接受您的这些偏好设置。请用301重定向把每一种变体(带www或不带www、http或https)都指向首选版本,添加规范标签,并保持内部链接一致。然后在Google Search Console中确认Google选中了您想要的版本。Google的最佳实践强调合并,而不是寄希望于Google做出正确选择。
会,但方式与 Google 不同。当多个 URL 包含相同文本时,AI 助手只会检索其中一个版本而忽略其他版本,而那个版本未必是您希望被引用的页面。如果各个副本内容矛盾,例如一个页面是旧价格、另一个页面是新价格,AI 可能引用错误信息,或者因为事实冲突而跳过您的网站。
三个习惯可以防止重复内容稀释您在 AI 中的可见度:
用免费的 重定向检查工具 确认重定向返回正确的状态码,并从源头上避免产生近似重复的页面:Sorank 会把每个新关键词与您已发布的页面比对,确保不会有两篇文章瞄准同一个查询(参见 关键词蚕食)。
重复内容会让搜索引擎难以判断该给哪个版本排名,可能损害您的SEO。请用规范标签合并重复内容、用301重定向归并相似内容,并采用响应式设计在所有设备上提供单一网址,从而预防重复内容问题。请在Google Search Console中监测您网站的重复内容警告。如果存在站内重复,请用规范化和重定向来合并。如果站外网站抄袭您的内容,请向Google举报并推动对方正确署名。一套没有重复混淆的干净网址结构,能让Google轻松理解您的网站。我们的GEO SEO审计工具能识别损害您排名的重复内容问题,让您高效地加以解决。
来源
不会。Google不会因为重复内容而处罚您的整个网站。不过,重复内容会让Google难以判断该给哪个版本排名,而非规范版本可能完全没有排名。如果您存在非有意的重复内容(打印页面、多种网址格式),Google可能会选择错误的版本收录,从而损害您的SEO。有意抄袭其他网站则可能导致排名处罚或被移出搜索结果。
如果您使用规范标签或重定向就不是。您可以让多个网址提供相同内容(打印版本、多种格式、产品变体)而不受处罚,前提是用规范标签告诉Google哪个版本是主版本。不过,在条件允许时,每个页面都拥有独特内容仍然更好。重复会稀释您的主题权威,并浪费抓取预算。
算。如果您同时在自己的网站和其他网站上发布完全相同的文章,那么每个版本都是重复内容。Google很可能只收录其中一个版本而忽略其余版本,而被收录的那个版本未必是您的。解决办法:在自己的网站上发布独特内容,或者先在自己的网站上发布,等待收录之后再在别处转载,并让规范标签指回您的原文。
他们已先于您体验了 SORANK

