网站上重复内容页面过多，会造成资源和精力的浪费，关键词的内部竞争，分散权重。得不偿失。如果站点中有太多重复的内容页，搜索引擎将其误判为收集站会很麻烦。从某种意义上说，收集站实际上是在采摘他人胜利的果实。如果它触及飓风算法，它将直接受到搜索引擎的惩罚，网站将降至零。

一、消除同一网站上重复内容的方法

1、网站标准化导致内容重复

解决方案：确保一篇文章只对应一个URL。没有多个版本。网站的所有内部链接都链接到此URL。有时你可以用301跳转。

2、非网站标准化导致内容重复

解决方案：选择允许收集的版本，其他版本禁止被搜索引擎捕获或收集。

1）使用robots文件禁止爬行。

2）使用Noindexmetarobots标记禁用索引。

3）在特殊情况下，可以使用nofollow和JavaScript来防止爬行器爬行。不建议使用此方法。

4）规范标记用于规范化web地址，也可用于其他情况。例如：

对于电子商务网站上相同款式、不同颜色和型号的产品，可以使用规范标签将权重集中在一个型号上。

会话ID为的页面也可以使用规范标记。例如，以下代码位于http://website/page-a.html页面上：

这样，无论以后生成什么会话ID：

Http://website/page-a.html？会话ID=86461

Http://website/page-a.html？会话ID=85427

搜索引擎会将上述URL加权到http://URL/page-a.html页面。

二、在不同网站中复制内容的解决方案

解决不同网站之间的重复内容很麻烦，因为其他网站上的内容无法控制。基于此，梁家有两条建议：

1、在页面中添加版权声明，要求复制的网站保留版权声明和指向原始来源的链接。

注意：一些聚合网站会对提要自动生成的内容进行爬，因此有必要向提要添加版权声明和链接。

一般来说，原版的外部链接会比转载的多。近两年来，国内网站也开始自觉维护版权。许多网站管理员愿意保留链接和来源。

2、坚持原有内容。随着时间的推移，我们将能够增加网站的权重，并增加网站上的内容被判定为原创内容的机会。

注意：如果其他网站大量剽窃以获得排名，您可以联系对方添加版权或删除剽窃内容，或向搜索引擎反馈。