网站改版中关于robots.txt文件问题
zbwsmile 提问于 3年 之前
zac老师好，非常感谢你无私的正确的分享对我的SEO工作方面的帮助！
我的站点状况：我有一个老的PC站点（例：www.oldPC.cn，当时还没有对应的WAP站点）进行了网站改版，当时的做法是全站301到新的域名（例：www.newPC.com）下。目前建立一个独立的移动m站(例：m.newPC.com)。通过百度的site语句发现，如果site:m.newPC.com会直接展示原来的PC域名（www.oldPC.cn）。前几天刚把老域名在百度站长里更新了网站改版，正在观察。
我的问题是：oldPC站点的www.oldPC.cn/robots.txt 访问时也被301跳转到www.newPC.com/robots.txt 。我目前觉得这个不正常，网络上百度谷歌都没有相关说明，想得到您的分析与建议，另外如果zac老师或者其他同行看到我的网站描述有什么建议也欢迎交流，响应式移动站点可能最近开发这里做不了。谢谢！
1 个回答
Zac 管理员 回答于 3年 之前
网站换域名时，旧域名robots文件不要自动转向到新域名下的robots文件，并且旧域名robots文件最好删除所有抓取限制，这样搜索引擎在旧域名上的抓取都会被识别到转向至新域名。
zbwsmile 回复于 3年 之前
“旧域名robots文件最好删除所有抓取限制”，是什么意思？我目前操作是全部Disallow了
Zac 管理员 回复于 3年 之前
意思就是全部要allow，全部允许抓取，和你做的正相反。你disallow的话，搜索引擎不能抓，那怎么看到转向到新URL了呢？
Ella 回复于 2年 之前
zac老师，如果不换域名，只是换协议，从HTTP到HTTPS呢？robots文件需要跳转吗？
来源：SEO每天一贴 Zac 昝辉