Categories


Tags


什么是ETag?ETag作用有哪些

有关ETag的简介:

ETag是URL的TAG,主要是标志URL对象有没发生改变,用于客户端的缓存。服务器产生ETag,并在HTTP响应头中将其传送到客户端,服务器用它来判断页面是否被修改过,如果未修改返回304,无需传输整个对象。

HTTP协议里ETag是“被请求变量的实体值”。

站点启用ETag的好处有哪些?

1、Sitemap启用ETag后,百度就可以快速的知道Sitemap的更新,在内容没有做更改的情况下,服务器只发回304应答头,对流量的消耗极小,平均每个head在227B大小的通常下,如果24个小时每秒回应的流量消耗仅为18.7M。

2、站长平台对每个站点的Sitemap主动抓取次数是有上限的,目前并没有对所有站点开放,如果你的站点Sitemap开启了ETag,并通过了测试,就可以用较小的流量享受百度及时更新网站的Sitemap的功能,加速了百度收录网站的内容。

3、网站上的文件会出现周期性的更改,但主体的内容并没有改变,仅改变了修改的时间,站长不需要客户端认为这个文件被修改了,而重新GET。

4、网站上的某些文件修改起来会比较麻烦,比如在1秒的期间内,修改了N次,If-Modified-Since能检查到的粒度是秒级,但是这种修改是无法判断的。

正常情况下ETag会与Last-Modified一起使用,这样可利用客户端的缓存。

来源:搜外网


Public @ 2011-12-13 16:03:52

sitemap工具升级改名公告

亲爱的网站管理员:很高兴的通知大家,百度站长平台对数据提交类的工具进行了整合升级,推出了“链接提交”工具。链接提交工具将sitemap、实时推送、url提交的入口进行了调整,同时为url提交工具增加了批量功能,可以让站长更便捷地向百度提交优质数据。新链接提交工具将功能整体分为两部分:自动提交和手动提交QQ截图20150427111108.jpg自动提交里又分实时推送和sitemap,都需要网站开发

Public @ 2011-07-28 16:07:13

什么是抓取异常

抓取异常指的是在程序中捕获程序运行时可能发生的异常,并对异常进行处理,以避免程序因异常而崩溃或运行出错。在程序中,我们可以使用 try-catch 块来捕获异常并进行相应的处理,例如打印错误信息、给出提示等。抓取异常是一个良好的编程习惯,可以提高程序的健壮性和可靠性。

Public @ 2023-06-16 20:00:12

站点地图的重要性

1、搜索引擎每天都是让爬虫在互联网爬行来抓取页面,站点地图的作用就是给爬虫爬行构造了一个方便快捷的通道,因为网站页面是一层一层的链接的,其中可能会存在死链接的情况,如果没有站点地图,爬虫爬行在某个页面就因死链接爬行不了,那么就不能收录那些断链接的页面。2、站点地图的存在不仅是满足搜索引擎爬虫的查看,更多是方便网站访客来浏览网站,特别是例如门户型网站由于信息量太多很多访客都是通过站点地图来寻找到自己

Public @ 2010-08-07 16:09:53

Sitemap协议类型及包含范围

百度Sitemap协议支持提交收录网页列表以及死链列表。收录网页列表用于指引百度搜索引擎快速、全面的抓取网站上内容。您可以使用XML格式、文本格式以及Sitemap索引文件提交。死链列表用于提交您网站上被删除或者权限发生变动的网页列表,指引百度搜索引擎快速屏蔽这些网页。死链列表目前只能使用文本格式在百度站长平台提交。Sitemap文件的包含范围以主域为单位。如果您验证了 http://www.ex

Public @ 2021-01-23 16:11:58

更多您感兴趣的搜索

0.428686s