Categories


Tags


如何解决百度spider无法抓取的问题?

Shanks 提问于 1年 之前

zac您好,网站能够正常访问,但是无法被百度蜘蛛抓取,做百度推广创意审核老是被拒,显示落地页无法访问,求支持,谢谢!

1 个回答

Zac 管理员 回答于 1年 之前

从描述和抓图看,基本可以肯定是服务器设置技术问题。这种问题作为用户访问网站是看不出源头的,只能技术人员仔细查服务器设置和网站程序。

比如,检查服务器或程序的什么地方是否屏蔽了百度蜘蛛IP或用户代理?

检查服务器原始日志,看看报错到底是什么?是4XX还是5XX?还是压根儿请求被拒绝?百度资源平台抓取诊断部分显示的是什么报错?

网站程序对用户和搜索引擎蜘蛛是否做不同处理?为什么要做不同处理?我访问网站时是被转向到另一个域名的,但从抓图看,百度蜘蛛并没有检测到转向,所以大概率服务器端针对不同访问设备做了不同处理,做了什么不同处理,只有程序员才能查看了。

来源:SEO每天一贴 Zac 昝辉


Public @ 2012-07-11 15:54:18

【直播干货】研发工程师直播专场QA集锦

一、网站抓取建设指南Q1:百度搜索会对新网站给予更高的抓取频次吗?A1:百度搜索会先识别网站内容的优质度,对内容优质的新站点在抓取频次上会有一定的倾斜,帮助内容得到更好的展现。Q2:如何让百度搜索知道我的网站是一个新站点呢?A2:主要有两种方式:1、通过百度搜索资源平台——资源提交工具来提交内容;2、在工信部进行网站ICP备案。Q3:百度搜索会调整对网站的抓取频次吗?A3:会的。百度搜索会基于网站

Public @ 2014-03-12 15:27:22

使用平台抓取断工具也不能完整显示,是不是就可以认为没有收录完整了?

这并不一定。平台抓取断工具可能会受到多种因素的影响,比如网页结构、网络情况、反爬虫机制等等,导致某些部分无法完整显示。因此,如果使用平台抓取的断工具不能完整显示,不一定代表没有收录完整。可以尝试使用其他抓取方式,或者手动收录。

Public @ 2023-06-03 14:50:10

网站内链的意义有哪些?

1. 提高网站用户体验:网站内链可以让用户更方便地浏览相关的内容,提高用户的满意度和留存率。 2. 提升网站权威性:网站内链可以让搜索引擎更方便地收录网站中的内容,提升网站的权威性和信誉度。 3. 提高网站排名:网站内链可以帮助搜索引擎更好地推荐网站中的内容,提高网站的排名和流量。 4. 优化页面结构:通过网站内链,可以合理分配网站中的内容,优化网站的页面结构,页面之间的内部链接可以形成良好

Public @ 2023-04-19 22:50:19

网站首页有相同文字链接指向同一页面是否有影响

相同文字链接指向同一页面通常不会对网站的SEO产生负面影响。这种链接称为“内部链接”,是指网站内不同页面之间的链接,其目的是帮助用户浏览、查找相关内容,同时传递页面之间的权重和关联性。相同的内部链接可以帮助用户更方便地访问相关内容,但对于搜索引擎来说,这些链接可能不会被视为关键词丰富的外部链接。因此,内部链接的重要性主要在于增加用户体验和页面间的联系,而不是直接影响网站的排名。

Public @ 2023-03-27 16:00:15

更多您感兴趣的搜索

0.424169s