GoogleBot桌面可以爬行原因索引延迟?

谷歌的John Mueller如果Googlebot Mobile或GoogleBot Desktop抓取一个页面,它会回答有关索引速度是否重要的​​问题。提出问题的人担心索引缓慢,想知道GoogleBot桌面是否爬行(而不是Googlebot Mobile)是原因。

GoogleBot桌面和移动

谷歌拥有众多遵循链接到链接的网站爬虫,发现新网页爬上和索引。

如果您查看您的流量日志,您可能会看到:

Googlebot Desktopgooglebot SmartPhoneGoogleBot ImageMediaPartners-Google(移动AdSense)Feedfetcher- GoogleGoogle-read-Aloudadsbot-GoockGooglebot-VideoadvertisementContinue读数下面

那些只是谷歌相关的Google爬虫爬虫的几个访问网站

John Mueller回答的问题主要关注GoogleBot桌面和GoogleBot智能手机以及对桌面版本的索引可能有什么影响。

这是问题:

“”我们的网站的帖子在一周后正在索引。该网站是旧的和移动友好的。

当我在检查工具中提交URL时,它显示它显示它由Google智能手机爬出。

但在索引爬网程序中,索引履带显示为GoogleBot桌面。

这是否意味着智能手机BOT正在爬行URL,桌面BOT正在索引此URL?

这是索引延迟背后的原因吗?“

广告联邦读数下方

John Mueller的答案:

“”这不会是ar任何类型的索引问题都是陈奕

我不知道你可能会在那里看到这种桌面和移动爬虫的组合。 这可能只是搜索控制台基本上是说嗯,默认情况下,检查工具只会使用移动Googlebot。

在实践中,我们始终爬行这两个爬行者。

这只是我们爬行和指数的问题与任何这些爬行者。

所以,通常你会看到80%的东西来自移动Googlebot和20%来自桌面Googlebot。

和那种比例,即基本上是正常的,并不意味着事情比其他任何东西慢。“

相关:

为什么Googlebot在某些网站上爬网了足够的页面

多个版本谷歌爬网网站

谷歌的googlebot支持页面指出,两个版本的Googlebot访问网页。 根据谷歌的官方文件:


“您的网站可能会被GoogleBot桌面和GoogleBot智能手机爬行。

您可以通过在请求中查看用户代理字符串来识别GoogleBot的子类型。”

根据Mueller和Google的说法,它完全正常地爬行,并且没有与GoogleBot桌面爬出的索引影响。

引文

谷歌的Googlebot页面

GoogleBot 谷歌的概述Google爬虫(用户代理) 读数以下读数主要是Googlebot桌面顶部爬行原因索引延迟? 在34:28分钟的标记观看视频