2013-02-28 71 views
2

我一直在寻找Googlebot及其兄弟姐妹从“CA”以外爬行的位置的高低,并且我没有找到特定于抓取的位置的运气。我从2008年(http://bit.ly/mONhf9)发现了一张数据邮件地图,我发现Google在自己的数据中心拥有自称的辉煌,并附有可爱的照片(http://www.google.com/about/datacenters/)。Googlebot从哪里抓取?

至少3年前,我从经验中知道,ole的机器人也会来自VA ......但过去......没有。

任何人都可以帮助这个谜语?我收集谷歌并不想让我知道。

回答

4

您的里程可能会有所不同,但在最流行的网站,我要访问的情况下,爬网发出来自:

  • 伊利诺斯( 46.35%)
  • 亚利桑那(15.68%)
  • 威斯康辛(14.95%)
  • 弗吉尼亚(11.85%)
  • 加利福尼亚州(11.17%)

受到这些抓取的网络服务器位于弗吉尼亚州的亚马逊。

这是一个地图上:(我不能直接发布它,因为这是我的第一篇文章)http://www.chrisbrunner.com/2014/04/01/where-does-googlebot-crawl-from/

同样,其他人都会有不同的经历,但是这是我们观察到2014年3月的课程。

+0

我使用的是MaxMind GeoIP免费数据库,虽然不错,但无法始终从其IP地址解析Googlebot的位置。 PageSpeed Insights在我的服务器上注册了600毫秒的响应时间,这是一款位于伦敦互联网骨干网附近的快速网络上的快速SSD备份机器(我的服务器对我的响应速度更快)。根据延迟情况,Pagespeed Insights可能会在美国基于Googlebot访问。如果是这样,这是否意味着非地理位置的网站应该在美国举办排名?那么这对于美国以外的互联网用户或托管公司来说如何呢? – 2017-04-05 19:21:49