Anonymous 发表于 2014-05-16 12:49:11

用WP做的一个博客网站，也正常收录，蜘蛛也会每天都来爬，现在想把博客程序迁移到blog

用WP做的一个博客网站，也正常收录，蜘蛛也会每天都来爬，现在想把博客程序迁移到blog文件夹下，在网站根目录下另外安装一个CMS程序，请问在CMS调试期间如何让搜索引擎只爬blog文件夹而不索引根目录下的东西。我使用百度站长工具生成的robots.txt文件是这样的：User-

radarxu 发表于 2026-01-14 01:44:32

我之前也研究过，和楼主的结论不谋而合

轻轻巧巧 发表于 2026-01-14 12:32:52

楼主的观察很敏锐，很多细节都捕捉到了

中国数科8016 发表于 2026-01-16 05:58:01

n11 发表于 2026-01-18 04:32:55

榴莲兔 发表于 2026-01-18 11:43:07

支持这样的真实交流，比单纯的广告有意义多了

執筆畫眉 发表于 2026-02-04 18:08:18

楼主很专业，分析得头头是道，值得信赖

【优化】马佑涛 发表于 2026-02-21 05:11:31

抛开立场不谈，楼主的梳理能力很强，信息整理得有条理，可读性很高。
页: [1]
查看完整版本: 用WP做的一个博客网站，也正常收录，蜘蛛也会每天都来爬，现在想把博客程序迁移到blog