重复内容清理：老站长踩过坑才懂的SEO实操逻辑
上个月帮朋友救一个掉权两年的老站，啥外链没发，啥新内容没更，就老老实实做了一遍重复内容清理。一个月后，流量涨了63%。站权从1回到了3。就这么神奇。
很多人做SEO，天天追着新技术跑，反而把最基础的东西忘了。重复内容就是最典型的那个。
为什么你做了重复内容清理反而掉流量？
我接过不下十个咨询，都是说“我把重复内容都删了，怎么流量反而掉了一半？”
问题出在哪？你根本没搞懂什么才算是SEO层面的重复内容，也没搞懂搜索引擎怎么看重复内容。
很多人以为只有抄别人的整站内容才叫重复。不对。只要同一个站点下，不同URL有超过80%相似度的内容，就算重复。哪怕都是你自己写的自己发的。
小到www和非www的两个首页，大到电商站几千个参数生成的筛选页，再到一篇文章同时放进两个分类生成两个链接，甚至标签页和分类页内容高度重合，全都是重复内容。
我去年见过一个做垂直电商的客户，一共才1200个真实SKU，全站生生生成了3.7万个URL。你猜多少是重复的？90%往上走。搜索引擎爬了大半年，根本没功夫爬他的真实产品页，站权直接压到0，半年没一个自然流量。太冤了。
https://obgeo.oss-cn-beijing.aliyuncs.com/pvc-articles/599ef08f-a5f5-4a76-bd58-d91686884da7.jpg
网站站内重复内容占比检测报表
搜索引擎为啥讨厌重复内容？说穿了就是一句话，人家的索引资源也是有限的。你一个小破站，放几万条重复内容占坑，爬虫每次来都爬一样的东西，时间长了，人家就觉得你这个站没什么有价值的新东西，自然不会给你好排名，也不会优先爬你的新内容。
很多人天天抱怨发了文章不收录，回头一查，一半索引都是重复页，可不就不给你收新的嘛。
那为啥删了重复内容反而掉流量？因为你瞎删啊。把本来有长尾流量的页面直接删了，也不做跳转，那不掉流量掉什么？
找对重复内容比瞎删重要一万倍
清理重复内容的第一步，永远是找全。90%的人第一步就错了，漏了一大半重复内容，清理完当然没用。
重复内容分两类，站内重复和站外重复，都得找。
先说站内重复，你要重点查这几个地方：
1. 基础配置类：http/https、www/不带www，有没有多个版本都能访问？很多人迁了https，还留着http能打开，这就是最基础的重复，很多老站到现在还犯这个错。
2. 内容类：同一篇内容挂载在多个分类下，生成多个URL；旧文更新没删旧URL，新URL发出来，两个内容一模一样；标签页、作者归档页内容和分类页高度重合。
3. 功能类：搜索结果页、筛选页、排序页、分页，电商站的不同参数组合生成的独立URL，这些基本全是重复重灾区。
说实话，我见过最夸张的一个博客，光是标签页就生成了八千多个URL，95%的标签内容都只有一两篇文章，和分类页内容几乎完全一样，这不被降权才怪。
找站内重复用什么工具？其实不用买什么付费工具，Google Search Console或者百度搜索资源平台的覆盖率报告，就能给你列出来大量重复的索引页。嫌不够全，用Siteliner扫一遍全站，直接给你出重复率报告，准得很。
https://obgeo.oss-cn-beijing.aliyuncs.com/pvc-articles/dce3a930-f6d5-48cc-aaca-648a79638987.jpg
Siteliner网站重复内容扫描结果
再说站外重复，这个很多人忽略了。就是你的原创内容发出来，被别的站长抄走了，人家站权重比你高，结果搜索引擎把抄袭的排前面，你的原创反而排到几十页往后。这种情况也属于重复内容问题，你不处理，原创写得再多也没用。
重复内容清理的正确实操步骤，亲测不掉流
https://obgeo.oss-cn-beijing.aliyuncs.com/pvc-articles/c0d81f06-5421-4c6a-95f8-016a0c73e3ba.jpg
重复内容清理的正确实操步骤，亲测不掉流
找完全部重复内容，接下来才是处理。记住一句话：能不删就不删，不同场景用不同方法，上来就删是新手才干的事。
我早年刚做站的时候，就踩过这个大坑。当时一下子删了两千多我认为的重复页，没做任何跳转，结果半个月流量掉了57%，疼了大半年才缓过来。这个教训我记到现在。
正确的步骤是这样的：
第一步，先定主URL。所有重复组里，只留一个主URL，其他都是要处理的。选主URL的标准也很简单：选已经收录、有稳定流量、有导入外链的那个。别脑子一热选新做的页面，把老的有流量的跳过去，纯属找死。
第二步，分情况处理，对应不同方法：
1. 垃圾重复页，比如参数生成的无用筛选页、搜索页，本来就没有任何流量，也不需要收录。直接在robots.txt里禁止爬取，已经收录的，去搜索控制台提交删除请求就行，不用删服务器上的文件，当然删了也没问题，记得返回正确的404状态码就行。
2. 两个都有用的重复内容，比如一篇文章要挂在两个分类，不想删其中一个链接。直接加canonical标签，指定主URL就行，搜索引擎会认，不会判定重复，也不用你删页，完美解决。
3. 内容高度重合的旧页，比如你更新了旧文，发了新URL。直接给旧URL做301永久跳转，跳转到主URL就行，权重和流量都会传递过去，啥都不丢。
4. 站外被抄袭的重复内容。先去平台提交原创保护，谷歌走DMCA版权投诉，百度走原创声明，一般大站都会处理。要是小站不理你，你就给自己的内容加更多独家信息，比如更新最新数据，加自己的实操案例，把内容拉长做深，搜索引擎终究会认更优质的那个原创版本。
处理完所有重复内容之后，你要做的就是等。一般4-8周，搜索引擎重新爬完你的站，更新索引之后，你就能看到变化。我上个月那个客户，就是第32天的时候流量开始暴涨，一下子回到了两年前的水平，而且还超了。
不过话说回来，也不是所有重复都要赶尽杀绝，对吧？少量的转载内容，只要标注清楚来源，占比不超过全站的三成，根本不会影响。还有一些必要的分页，只要主题做好了canonical标签，也不会有问题，不用瞎折腾。
做SEO做了快十年，最大的感受就是，大部分时候你的流量上不去，真不是你内容写得不好，也不是外链买得不够多，就是一堆没用的重复内容把你的站权耗干净了。抽一个周末，给自己的站做一遍全面的重复内容清理，效果真的比你瞎更十篇水文好太多。 非常同意楼主的看法，现实中确实是这样，很多人都忽略了这一点。 看完很有启发，也引发了我不少思考，有空也想分享下自己的看法。 楼主考虑得很全面，不仅讲了方法，还提到了注意事项，非常贴心。 每一条都很实用，已经记下来了，以后遇到类似问题就能用上。 内容写得很详细，逻辑也很清晰，对新手来说非常友好，支持一下楼主。 很多点我之前都没想到，楼主一提醒才恍然大悟，收获很大。 虽然有些地方不太懂，但整体看完还是收获很多，慢慢消化一下。 虽然篇幅不长，但句句都是重点，简洁又有深度，非常不错。 这样的优质帖子越多越好，希望论坛能多一些这样真诚的交流。 这个话题确实很值得讨论，我也有类似的经历，非常认同楼主的观点。 已经推荐给朋友来看了，好东西就应该一起分享一起学习。
页:
[1]