SEO日志：被90%SEO新手忽略的免费流量密码
你有没有过这种情况？内容写了几十篇，外链发了几百条，结果收录还不到10%？其实吧，问题根本不在内容，在你那躺了大半年的SEO日志。SEO日志不就是给爬虫看的？大错特错
很多人刚学SEO，听博主说要弄SEO日志，就随便找个工具生成一个扔根目录，从此再也没打开过。这不是扯淡吗？
说白了，SEO日志是你和搜索引擎对话的**通道啊。你不让它知道你改了什么，更新了什么，它凭什么给你流量？
我去年接了一个做厨具的电商站，老板花了三万块买了个定制模板，说自带SEO优化，结果上线半年，1200多个产品页，只收录了29个。自然流量一天不到20个UV。
我上去第一秒就查他的robots和SEO日志，你猜怎么着？模板自动把所有“缺货”状态的产品都加了disallow，整个站80%的产品都缺货，等于直接告诉搜索引擎别爬。
后来改完规则，重新提交日志，30天收录量涨了217%，自然流量涨了142%，长尾词CTR直接提了38%。就改了三行代码，你说扯不扯。
https://obgeo.oss-cn-beijing.aliyuncs.com/pvc-articles/579d2ab9-5313-4217-9353-56080e6780c0.jpg
谷歌搜索控制台SEO日志抓取错误统计截图
说实话，很多人对SEO日志的理解完全错了。它不是给搜索引擎交了作业就完了，是你要通过它，指挥搜索引擎该爬什么，不该爬什么，什么时候爬。
三个新手必踩的坑，我挨个给你扒
第一个坑，就是我刚才说的，生成完事，再也不管。你网站天天更内容，天天删页面，日志不更新，搜索引擎怎么知道你加了新页面？很多资讯站，日更十多篇，sitemap和日志还是上个月的，新内容半年都不收录，怪谁？
第二个坑，什么页面都放开爬，不懂得节流。谷歌和百度都给每个站分配了抓取配额，小站一天总共就几千次抓取额度，你把用户搜索页、标签归档页、侧边栏筛选页全都放开，真正的文章产品页反而没额度爬。
我早年操盘那个日活千万的内容平台，就是踩过这个坑。那时候刚上线，为了收录多，啥都放开，结果每天80%的抓取额度都被垃圾页面占了，新更的文章平均48小时才被爬到，很多热点内容爬到时热度都没了。后来我们改了SEO日志规则，把所有非内容页都禁了，新内容平均收录时间直接降到6小时，整体自然流量涨了27%，就这么简单。
第三个坑，从来不对日志做复盘检查，出问题了都不知道。我上个月刚接了一个案例，一个做美食测评的博主，做了三年，流量一天一万多，突然半个月掉成几百，他说肯定是算法针对他，要我帮他救站。我上去第一查SEO日志，哦嗬，服务器换服务商的时候，程序员不小心把robots.txt改成了全站disallow，整整12天，搜索引擎一个页面都爬不了，他自己居然完全不知道，还在天天更内容。
你说，这怨谁？
【操作路径：Google Search Console -> 设置 -> 抓取 -> SEO日志统计】
你听我一句劝，每周抽10分钟看一眼，比你发十篇外链有用多了。
https://obgeo.oss-cn-beijing.aliyuncs.com/pvc-articles/03486c86-949b-4dd2-aba7-71ff7bf2af38.jpg
百度资源平台SEO日志robots检测后台截图
我用了5年的SEO日志实战土办法
不说虚头巴脑的理论，就说我每次接站都必做的几件事。
先检查robots.txt对不对，有没有把不该禁的页面禁了，不该放的放出来。很多新手不知道，模板自带的默认robots，十有八九都有问题，要么禁了重要页面，要么放了一堆垃圾页。
然后，把所有死链、404页都整理出来，在日志里屏蔽掉，别浪费配额。别小看这点，我见过很多站，光死链就占了30%的抓取额度，纯纯的浪费。
再然后，每周核对一次站点地图和日志的抓取数据，有没有你想收录的页面，爬虫半个月都没来过？有的话直接提交到搜索控制台，催一下。如果是每天更新的内容站，我会给新内容单独做一个日志，每周自动更新一次，主动推给搜索引擎。说白了，就是告诉搜索引擎，我这有新东西，快来爬。
我之前给一个美妆号做A/B测试，一半内容用这个方法，一半还是老方法放着不动。一个月下来，用新方法的那部分内容，收录率从41%升到87%，自然流量半个月涨了2400多个UV，一分钱没花。
不过话说回来，很多小站说我总共才几十个页面，也要搞这个吗？
当然要。去年百度算法大更新那波，我知道的就有十几个小站，因为模板自动更新robots，把首页给禁了，整站流量掉光，半个月后才发现，本来能赚钱的站直接死了。
说白了，SEO拼到最后，都是拼细节。那些大佬说的什么战略什么思维，大多是包装出来的。你把这种别人都懒得做的小事做好，流量自然就上来了。对吧？ 很多点我之前都没想到，楼主一提醒才恍然大悟，收获很大。 非常有建设性的意见，对解决实际问题有很大的参考意义。
看完很有启发，也引发了我不少思考，有空也想分享下自己的看法。 楼主态度很认真，回复也很耐心，这样的楼主值得大家支持。 这样用心的帖子不多见，必须顶上去让更多人看到优质内容。 帖子内容很扎实，不浮夸不炒作，真正有用的信息都在里面。 虽然有些地方不太懂，但整体看完还是收获很多，慢慢消化一下。 楼主考虑得很全面，不仅讲了方法，还提到了注意事项，非常贴心。 对新手特别友好，解释得很细致，就算零基础也能看懂大半。 希望楼主常来发帖，持续输出优质内容，我们都会一直支持你。 看完楼主的分享感觉很有收获，感谢这么用心的整理，学到很多新知识。 不仅内容好，语气也很温和，这样的交流氛围真的很不错。 内容真实不做作，没有多余套路，都是实实在在的经验之谈。 对这个话题有了更全面的认识，不再只停留在表面理解。 不管是内容还是排版都很用心，看得出来楼主花了不少时间，必须支持。
页:
[1]