什么是重复内容？
重复内容是指与其他网站或同一网站不同页面上的内容相似或完全相同的副本。网站上存在大量重复内容会对 Google 排名产生负面影响。
换句话说：重复内容是指与其他页面上显示的内容逐字相同的内容。
但“重复内容”也适用于与其他内容相似的内容, 即使它被稍微重写了。
重复内容如何影响 SEO？
一般来说，Google 不希望对内容重复的页面进行排名。
谷歌指出：“谷歌努力索引并显示具有不同信息的页面”。
因此，如果我们网站上的页面没有明确的信息，则可能会损害您的搜索引擎排名。
具体来说，以下是具有大量重复内容的网站遇到的三个主要问题。
自然流量减少：这非常简单。Google 不希望对使用从 Google 索引中其他网页复制的内容的网页进行排名。
例如，假设您的网站上有三个内容相似的页面。
谷歌不确定哪个页面是“原始”。因此，所有三个页面都很难排名。
处罚（极其罕见）：谷歌表示，重复内容可能会导致网站受到处罚或完全取消索引。
然而，这种情况非常罕见。而且只有在某个网站故意从其他网站抓取或复制内容的情况下才会这样做。
因此，如果您的网站上有一堆重复的页面，您可能不需要担心“重复内容惩罚”。
更少的索引页面：这对于具有大量页面的网站（例如电子商务网站）尤其重要。
有时，Google 不仅仅会降低重复内容的排名。它实际上拒绝对其进行索引。
因此，如果您网站上的某些页面未编入索引，则可能是因为您的抓取预算浪费在重复的内容上。
最佳实践
留意不同 URL 上的相同内容
这是出现重复内容问题的最常见原因。
例如，假设您运营一个电子商务网站。
您有一个销售 T 恤的产品页面。
如果一切设置正确，该 T 恤的每种尺寸和颜色仍将位于同一 URL 上。
但有时您会发现您的网站为产品的每个不同版本创建一个新的 URL，这会导致数千个重复的内容页面。
另一个例子：
如果您的网站有搜索功能，这些搜索结果页面也可以被索引。同样，这可以轻松地向您的网站添加 1,000 多个页面。所有这些都包含重复的内容。
检查索引页面
查找重复内容的最简单方法之一是查看您网站中在 Google 中编入索引的页面数量。
您可以通过在 Google 中搜索 site:example.com 来完成此操作。
在Google Search Console中查看您的索引页面。
不管怎样，这个数字应该与您手动创建的页面数量一致。
例如，DigSEO 有 183 个页面被索引：
如果该数字是 16,000 或 160,000，我们就会知道自动添加了很多页面。这些页面可能包含大量重复内容。
确保我们的网站正确重定向
有时，您不仅拥有同一页面的多个版本，而且拥有同一站点的多个版本。
虽然很少见，但我在野外见过很多次。
当网站的“WWW”版本未重定向到“非 WWW”版本时，就会出现此问题。
如果您将站点切换到 HTTPS，并且没有重定向 HTTP 站点，也可能会发生这种情况。
简而言之：您网站的所有不同版本都应该出现在同一个位置。
使用 301 重定向
301重定向是解决网站上重复内容问题的最简单方法。
因此，如果您在网站上发现一堆重复的内容页面，请将它们重定向回原始页面。
一旦 Googlebot 停下来，它将处理重定向并仅索引原始内容。
（这可以帮助原始页面开始排名）
留意类似内容
重复内容不仅仅意味着从其他地方逐字复制的内容。
事实上，谷歌将重复内容定义为：
因此，即使您的内容在技术上与现有内容不同，您仍然可能会遇到重复内容的问题。
对于大多数网站来说这不是问题。大多数网站都有几十个页面。他们为每个页面编写独特的内容。
但在某些情况下，可能会出现“相似”的重复内容。
例如，假设你运营一个教人们如何说法语的网站。
您服务于：漂亮国波士顿地区。
你可能有一个围绕关键字优化的服务页面：“学习波士顿法语”。
另一个页面试图为“学习剑桥法语”排名。
有时内容在技术上会有所不同。例如，一页列出了波士顿位置。另一页有剑桥地址。
但在大多数情况下，内容非常相似。
从技术上讲，这是重复的内容。
为网站上的每个页面编写 100% 独特的内容是否很痛苦？是的。但如果您真的想对网站上的每个页面进行排名，那么这是必须的。
使用规范标签
rel =canonical标签告诉搜索引擎：
我们有很多包含重复内容的页面，除了我们所需要的页面外，其余的页面你可以忽略。
谷歌表示，规范标签比阻止具有重复内容的页面更好。
（例如，使用robots.txt或在网页 HTML 中使用 noindex 标记来阻止 Googlebot）
因此，如果您在网站上发现一堆包含重复内容的页面，需要：
- 删除它们
- 重定向它们
- 使用规范标签
使用工具
使用SEO 工具，可以尽早发现重复内容的页面。
例如，Siteliner 会扫描 ahrefs 网站查找出包含大量重复内容的页面。
合并页面
就像我提到的，如果网站有很多包含直接重复内容的页面，可能希望将它们重定向到一页。
（或使用规范标签）
但是如果您有类似内容的页面怎么办？
我们可以为每个页面打磨出独特的内容，或者将它们合并到一个大型页面中。
例如，假设您的网站上有 3 篇博客文章，它们在技术上有所不同……但内容几乎相同。
我们可以将这 3 篇文章合并成一篇 100% 独特的精彩博客文章。
由于我们从网站中删除了一些重复的内容，因此该页面的排名应该高于其他 3 个页面的总和。
Noindex WordPress 标签或类别页面
如果我们使用 WordPress，您可能已经注意到它会自动生成标签和类别页面。
这些页面是重复内容的巨大来源。
因此它们对用户很有用，我建议向这些页面添加“noindex”标签。这样，它们就可以存在而无需搜索引擎对其进行索引。
当然还可以在 WordPress 中进行设置，这样就根本不会生成这些页面。