Categories


Tags


百度搜索robots协议全新升级公告

Robots是站点与spider沟通的重要渠道,站点通过robots文件声明本网站中不想被搜索引擎收录的部分或者指定搜索引擎只收录特定的部分。9月11日,百度搜索robots全新升级。升级后robots将优化对网站视频URL收录抓取情况。仅当您的网站包含不希望被视频搜索引擎收录的内容时,才需要使用robots.txt文件。如果您希望搜索引擎收录网站上所有内容,请勿建立robots.txt文件。如您

Public @ 2017-06-06 16:09:00

站点地图注意要点

真实有效站点地图的主要目的是方便搜索抓取的,如果地图存在死链或坏链,会影响网站在搜索引擎中网站权重的,所以要仔细检查有无错误的链接地址,提交前通过站长工具,检查网站的链接是否有效。简化站点地图不要出现重复的链接,要采用标准W3C格式的地图文件,布局要简洁,清晰,如果地图是内容式地图,每页不要超过100内容个链接,采用分页的形式,逐一开来。更新建议经常更新站点地图,便于培养搜索爬虫爬行的频率。经常有

Public @ 2016-06-24 16:09:53

百度搜索资源平台-sitemap全网开放及建议启用Etag的公告

尊敬的用户: 为了更好地优化搜索资源平台的索引和抓取效率,提高网站页面的收录速度,我们决定将百度搜索资源平台的sitemap功能全网开放。从即日起,所有网站都可以使用sitemap协议向百度搜索推送网站的页面信息。 同时,我们也建议网站在sitemap中启用Etag机制。Etag是一种用于判断网页是否发生变化的机制,在网站页面发生变动时可以通过更新Etag来通知搜索引擎重新抓取该页面,从而保持

Public @ 2023-07-26 21:00:31

更多您感兴趣的搜索

0.561070s