Categories


Tags


为什么我的网站中的一些私密网页也会被百度收录?

Baiduspider对网页的抓取,是通过网页与网页之间的链接实现的。

网页之间的链接类型,除了站点内部的页面链接之外,还有不同网站之间的互相链接。因此,某些网页即便通过您的网站内部链接无法访问到,但是,如果别人的网站上有指向这些页面的链接,那么这些页面还是会被搜索引擎所收录。

百度Spider的访问权限,和普通用户是一样的。因此,普通用户没有权限访问的内容,Spider也没有权限访问。之所以看上去某些访问权限限制内容被百度收录,原因有两点:

  A. 该内容在Spider访问时是没有权限限制的,但抓取之后,内容的权限发生了变化

  B. 该内容有权限限制,但是由于网站安全漏洞问题,导致用户可以通过某些特殊路径直接访问。而一旦这样的路径被公布在互联网上,则Spider就会循着这条路径抓出受限内容

如果您不希望这些私密性内容被百度收录,一方面可以通过Robots协议加以限制;另一方面,也可以通过反馈中心反馈给我们进行解决。


Public @ 2020-06-19 15:55:52

百度输入关键词query点击搜索后,网页显示报错信息“网页定向重复”

当您使用百度搜索出现上述情况时,极有可能是您被  “  劫持  ”  了。  解决方案:1、建议您尝试加密连接 https://www.baidu.com 进行搜索,看看问题是否依然存在。(1)需要注意的是,如果您的 IE 浏览器版本较低,比如在 IE8 及以下版本的浏览器中,是无法通过 https 加密链接使用百度服务的。(2)我们强烈建议您对

Public @ 2014-07-11 16:23:10

新站收录慢,怎样做才能增加收录

新站优化怎样做才能增加收录?让更多的用户访问到自己的网站,从而提高流量,但是对于新站优化来说,怎样让百度快速收录成为大家非常关心的问题,收录对于网站优化来说是非常重要的,今天来告诉大家如何做才能促进收录。百度站长平台-链接提交工具在百度站长平台上使用链接提交工具,其中百度链接提交的方式也有三种,通过主动推送、自动推送和站点地图文件推送。当然,您也可以手动提交。链接提交加快了爬虫抓取速度,这有利于页

Public @ 2020-06-19 15:55:20

百度只收录首页不收录内页:

这种情况可能有多种原因。以下是可能导致百度只收录首页而不收录内页的原因: 1. 网站结构有问题:如果网站结构不合理,内部链接不足或者链接过于复杂,可能导致百度无法抓取到内页。 2. 内页质量不够高:百度会根据原创度、内容质量、页面质量等因素评估网页的价值,如果内页质量不够高,可能不会被收录。 3. 内页访问量不够高:如果内页的访问量不够高,百度可能不会将其优先收录。 4. 技术问题:如果网

Public @ 2023-04-10 16:50:46

更多您感兴趣的搜索

0.523228s