Categories


Tags


robots文件中屏蔽的为什么还可以收录?

我今天来给大家详细讲解下,先了解几个概念1、robots只是禁止抓取,不是禁止收录2、另外还有nofollow的作用不是不抓取这个链接,是不从这个链接传递权重了解这2个概念后,我们再来讨论怎么处理这类收录问题:robots写正确的同时,不要在任何一家收录的网站发外链,友链,也不要主动提交百度,这样才可以保证不被搜索引擎收录,为什么呢?大家百度查一下淘宝,如图:按照道理淘宝写了robots怎么还是收

Public @ 2021-04-26 16:09:29

sitemap的三种格式,TXT、XML及HTML区别是什么?

课程讲的sitemap是url提交, txt文本、HTML 、XML区别是啥啊 我看了好久没看懂。11-22.那我们网站的这个网站地图又是干嘛用的呢?11-23.网站的sitemap,主要目的就是将整站的url都整理到一个文件里面,然后把文件上传至网站根目录下。再到百度资源平台,提交sitemap处,提交这个文件的链接。sitemap可以帮助搜索引擎更好的了解网站的url,促进蜘蛛的爬取和页面收录

Public @ 2016-11-09 16:09:51

更多您感兴趣的搜索

0.389722s