谷歌如何使用搜索控制台爬网统计报告

谷歌搜索控制台

新的爬网统计报告通过在新的培训视频中搜索addaniel waisberg彻底解释。搜索控制台中的爬网统计报告收到了一个主要几个月前更新

。如果您没有机会查看新报告,现在是熟悉所添加的所有见解的好时机。

谷歌的新视频分解了爬网统计报告的每个部分并解释数据可用于确定GoogleBot如何能够爬网能够爬网。

Googlebot

能够有效地

爬行E 它有助于快速获取搜索结果中的新内容,并帮助Google发现对现有内容进行的更改。 这是从绝对基础开始的视频的回顾:爬行是什么?

Web爬网是什么?

爬网过程从网站所有者提供的先前爬网和站点地图的网址列表开始。

谷歌使用Web爬虫访问URL,阅读信息在其中,并遵循这些页面上的链接。

抓取物将在列表中重新审视页面以检查它们是否已更改,并且还会抓取它发现的新页面。

在此过程中爬虫必须做出重要的决定,例如确定何时爬行的时间和何处,同时确保网站可以处理使用的服务器请求ogle。

在下面的

下面的广告传票读数成功爬网了页面并传递给Google索引,以准备在Google搜索结果中服务的内容。

谷歌想要确保它不会超载您的服务器,因此爬网的频率取决于三件事:

爬网速率:

爬虫的最大并发连接数可以用来爬网网站

爬行需求:

内容量有多少谷歌是希望的。

爬网预算

:google谷歌可以并想要爬网的网址数。

搜索控制台爬网统计报告是什么? 爬行搜索控制台中的Stats报告用于帮助理解和优化GoogleBot爬网。它提供了有关谷歌爬行行为的统计数据,例如它爬行的频率一个网站和答复是什么。广告联系读数下面 Wasiberg表示,如果使用大型网站,则报告是相关的,但如果您有一个具有少于1000页的网站,则不太关注。 以下是一些问题,您可以使用爬网统计报告中提供的数据回答:您的网站的一般可用性是多少?爬网请求的平均页面响应是多少?谷歌对您的申请进行了多少份请求站点在过去90天?如何访问爬网统计报告

站本所有者可以通过登录搜索控制台并进入“设置”页面来找到爬网统计报告。在那里,您将看到爬网统计报告。

在打开报告时,您会看到一个摘要页面,其中包括爬行趋势图,主持人tatus细节,以及爬行请求击穿。

蠕趋势图表

中的抓取趋势图表报告在这三个指标:

读取DowstoTal爬网网站上的URL的请求(无论是否成功或不)。爬行期间从站点下载大小.Average页面响应时间用于爬网请求检索页面内容。Google On How to Use Search Console’s Crawl Stats Report在分析时这些数据看出主要尖峰,下降和趋势随着时间的推移。

例如,如果您在爬行请求中看到显着下降,谷歌建议确保没有一个新的 robots.txt Google On How to Use Search Console’s Crawl Stats Report到您的网站。

或者您可能发现您的网站正在缓慢响应GoogleBot。这可能是您服务器无法处理所有请求的标志。

注意平均响应时间一致增加。谷歌表示可能不会立即影响爬行速率,但它是您的服务器可能无法处理所有负载的良好指标。

广告联网读数下方

主机状态详细信息

主机状态数据允许您检查网站在过去90天内的一般可用性。在本节中的错误意味着谷歌无法抓取您的网站技术原因。

当您单击以获取主机的状态信息,您会发现三类:

rebots.txt获取

rebots.txt获取

:爬行robots.txt文件时的失败率。

DNS解析Google On How to Use Search Console’s Crawl Stats Report:显示DNS服务器未识别您的主机名或在爬网期间没有回复。

服务器有限公司nnectivity :显示当您的服务器没有响应或没有为爬网提供URL提供完整响应。Google On How to Use Search Console’s Crawl Stats Report爬网请求卡

爬网请求卡显示几个故障,以帮助您了解Google爬虫的内容。在你的网站上找到

有四个可用故障:

抓取响应

:回应谷歌收到爬行您的网站时。爬网文件类型

:显示请求返回的文件类型。Google On How to Use Search Console’s Crawl Stats Report爬网目的

:显示爬行您网站的原因。 Googlebot类型Google On How to Use Search Console’s Crawl Stats Report:显示谷歌使用的用户代理进行爬网请求。总结

这些是使用搜索控制台的爬钩爬网的基础知识,以确保GoogleBot可以有效地抓取您的网站以获取搜索。

在下面 外带使用摘要页面图分析爬网卷 e和趋势。使用主机状态详细信息以检查您的网站的普通可用性。使用爬网请求细分以了解Google在爬行您的网站时查找的内容。

请参阅下面的完整视频: