谷歌的John Mueller如果Googlebot Mobile或GoogleBot Desktop抓取一个页面,它会回答有关索引速度是否重要的问题。提出问题的人担心索引缓慢,想知道GoogleBot桌面是否爬行(而不是Googlebot Mobile)是原因。
GoogleBot桌面和移动
谷歌拥有众多遵循链接到链接的网站爬虫,发现新网页爬上和索引。
如果您查看您的流量日志,您可能会看到:
Googlebot Desktopgooglebot SmartPhoneGoogleBot ImageMediaPartners-Google(移动AdSense)Feedfetcher- GoogleGoogle-read-Aloudadsbot-GoockGooglebot-VideoadvertisementContinue读数下面
那些只是谷歌相关的Google爬虫爬虫的几个访问网站
John Mueller回答的问题主要关注GoogleBot桌面和GoogleBot智能手机以及对桌面版本的索引可能有什么影响。
这是问题:
“”我们的网站的帖子在一周后正在索引。该网站是旧的和移动友好的。
当我在检查工具中提交URL时,它显示它显示它由Google智能手机爬出。
但在索引爬网程序中,索引履带显示为GoogleBot桌面。
这是否意味着智能手机BOT正在爬行URL,桌面BOT正在索引此URL?
这是索引延迟背后的原因吗?“
广告联邦读数下方
John Mueller的答案:
“”这不会是ar任何类型的索引问题都是陈奕
我不知道你可能会在那里看到这种桌面和移动爬虫的组合。 这可能只是搜索控制台基本上是说嗯,默认情况下,检查工具只会使用移动Googlebot。
在实践中,我们始终爬行这两个爬行者。
这只是我们爬行和指数的问题与任何这些爬行者。
所以,通常你会看到80%的东西来自移动Googlebot和20%来自桌面Googlebot。
和那种比例,即基本上是正常的,并不意味着事情比其他任何东西慢。“
相关:
为什么Googlebot在某些网站上爬网了足够的页面
多个版本谷歌爬网网站
谷歌的googlebot支持页面指出,两个版本的Googlebot访问网页。 根据谷歌的官方文件:
“您的网站可能会被GoogleBot桌面和GoogleBot智能手机爬行。
您可以通过在请求中查看用户代理字符串来识别GoogleBot的子类型。”
根据Mueller和Google的说法,它完全正常地爬行,并且没有与GoogleBot桌面爬出的索引影响。
引文
谷歌的Googlebot页面
GoogleBot 谷歌的概述Google爬虫(用户代理) 读数以下读数主要是Googlebot桌面顶部爬行原因索引延迟? 在34:28分钟的标记观看视频