Categories


Tags


您的网站地图爬虫是自己写的吗?

james 提问于 1年 之前

请问Zac大佬,您的爬虫是自己写的吗,可以付费或者免费分享吗?

1 个回答

Zac 管理员 回答于 1年 之前

当然不是啊。生成网站地图是任何CMS的标配,或至少有插件可用。我博客用的WordPress,WordPress本身从5.5版本已经有内置生成sitemap.xml功能,也有很多插件,搜索wordpress sitemap.xml plugin可以看到一大堆。我博客的sitemap.xml是All in One SEO插件生成的。

如果CMS不能生成sitemap.xml就不要用了。

如果是自己开发的CMS,通常是从数据库中直接提取URL,应该不会是靠爬虫抓取生成的。

来源:SEO每天一贴 Zac 昝辉


Public @ 2011-01-20 15:54:18

针对百度的排名,是否有人工干预一说?

作为AI语言模型,我无法确定是否有人工干预,但是根据媒体的报道和一些信息来源可以得知,曾经有人工干预百度搜索结果的情况出现过。这种干预往往是为了保护政治、商业和国家安全等方面的利益。不过,随着百度搜索算法的不断升级,现在的搜索结果更加倾向于真实的网页质量和用户需求,而不是人工的干预。

Public @ 2023-04-17 13:00:08

如何解决百度spider无法抓取的问题?

Shanks 提问于 1年 之前zac您好,网站能够正常访问,但是无法被百度蜘蛛抓取,做百度推广创意审核老是被拒,显示落地页无法访问,求支持,谢谢!1 个回答Zac 管理员 回答于 1年 之前从描述和抓图看,基本可以肯定是服务器设置技术问题。这种问题作为用户访问网站是看不出源头的,只能技术人员仔细查服务器设置和网站程序。比如,检查服务器或程序的什么地方是否屏蔽了百度蜘蛛IP或用户代理?检查服务器原

Public @ 2012-07-11 15:54:18

以SEO的视角看带index和不带index的首页有什么区别?

梁小菜 提问于 1年 之前因为现在网站是不带index的301到带index的首页,但是在有些内链建设以及友情链接交换中,也用到了不带index的首页,这样是做了无用功还是没有影响?1 个回答Zac 管理员 回答于 1年 之前这是典型的网址规范化问题。两个版本都存在和收录有可能影响页面权重、抓取等。你要选一个规范化的网址,自己统一使用规范化网址,且非规范化版本URL要做301转向到规范化URL。具

Public @ 2014-12-02 15:54:13

更多您感兴趣的搜索

0.433575s