谷歌有
宣布在Google搜索控制台中启动新的爬网统计报告。
您可以在此处访问此报告
,但请记住谷歌现在正在推出这一点,它可能为您生成错误。
什么是新的。 谷歌表示,新报告使开发人员,网站管理员,SEO等更容易找到Google爬网的问题。什么是新的:
按响应代码,爬网文件类型,爬网目的和googlebot类型分组的总数。
-
关于主机状态的详细信息
-
-
URL示例显示出现的站点请求中的位置
-
属性的全面摘要,具有多个主机的属性和对域属性的支持
新的爬网统计报告。
谷歌还有一种方法可以将其分解为“分组爬行数据”。该报告提供了由这些组分解的爬网请求的数据:(1)响应,(2)获取URL的文件类型,(3)爬网请求的目的,(4)和GoogleBot代理。
帮助文档