Categories


Tags


您的网站地图爬虫是自己写的吗?

  您的网站地图爬虫是自己写的吗?

整理自网络ChatGPT产生之内容,文本内容不具备参考意义,程序内容及代码片段有且仅有借鉴意义。

  

不是,我们使用的是一些开源的网站地图爬虫,例如Scrapy、BeautifulSoup等等。

Public @ 2023-02-25 05:12:01 整理自网络ChatGPT产生之内容,文本内容不具备参考意义,程序内容有且仅有借鉴意义。

采集的内容会不会被当作垃圾站?

不一定会被当作垃圾站,这取决于采集的内容和采集方式。如果采集的内容是符合法律法规和道德标准的,并且采集方式是合法、合规的,则这些内容不应该被认为是垃圾站。但是,如果采集的内容含有不当、不合法或违反道德标准的内容,或者采集方式存在问题,可能会被认为是垃圾站。

Public @ 2023-05-28 09:50:08

请问:一个关键词,搜索结果匹配网站多个页面,这种情况需要处理么?

SR 提问于 3年 之前网站主要做谷歌搜索,经常碰到谷歌某个关键词,会匹配到网站多个(2-4)页面结果;从展示网站的页面主题和关键词匹配度来看,分两种情况:关键词和页面主题内容匹配度高,举例:搜索关键词 how to get back deleted data in Windows,除了匹配到专门针对这个关键词写作的页面,还有可能性会匹配到how to get back deleted data

Public @ 2019-01-24 15:52:34

更多您感兴趣的搜索

0.489308s