在互联网论坛和与内容相关的Facebook群组上，讨论经常是关于Googlebot是如何工作的——我们在这里将其称为GB——它能看到什么，不能看到什么，它访问什么样的链接，以及它如何影响搜索引擎优化。
在本文中，我将展示我历时三个月的实验的结果。
在过去的三个月里，GB几乎每天都来拜访我，就像朋友一样来喝杯啤酒。
有时它是孤独的:
[02/09/2018 18:29]: 66.249.76.136 /page1.html Mozilla/5.0(兼容;Googlebot / 2.1;+ http://www.google.com/bot.html)
[02/09/2018 19:45:23]: 66.249.76.136 /page5.html Mozilla/5.0(兼容;Googlebot / 2.1;+ http://www.google.com/bot.html)
[02/09/2018 21:01:10]: 66.249.76.140 /page3.html Mozilla/5.0(兼容;Googlebot / 2.1;+ http://www.google.com/bot.html)
[02/09/2018 21:01:11]: 66.249.64.72 /page2.html Mozilla/5.0(兼容;Googlebot / 2.1;+ http://www.google.com/bot.html)
[02/09/2018 23:32:45]: 66.249.64.72 /page6.html Mozilla/5.0(兼容;Googlebot / 2.1;+ http://www.google.com/bot.html)
有时它会带着它的伙伴一起来:
[16/09/2018 19:16:56]: 64.233.172.231 /page1.html Mozilla/5.0 (X11;AppleWebKit/537.36 (KHTML，像Gecko;Chrome/41.0.2272.118 Safari/537.36
[16/09/2018 19:26:08]: 66.249.69.235 /image.jpg Googlebot-Image/1.0
[27/08/2018 23:37:54]: 66.249.76.156 /page2.html Mozilla/5.0 (Linux;Android 6.0.1中;Nexus 5X Build/MMB29P) AppleWebKit/537.36 (KHTML，像Gecko) Chrome/41.0.2272.96 Mobile Safari/537.36(兼容;Googlebot / 2.1;+ http://www.google.com/bot.html)
我们玩了很多有趣的游戏:
捕获:我观察到GB如何喜欢运行重定向301和爬行图像，并从规范运行。
躲猫猫:Googlebot躲在隐藏的内容中(正如它的父母所说，它不容忍和避免隐藏内容)
生存:我准备了陷阱，等待它跳出来。
障碍:我设置了不同难度的障碍，看看我的小朋友会如何处理。
你可能看得出来，我并没有失望。我们玩得很开心，还成了好朋友。我相信我们的友谊会有美好的未来。
但是让我们言归正传!
我建了一个网站，上面有星际旅行公司的相关内容，提供飞往银河系中尚未发现的行星的航班。
内容似乎有很多优点，但实际上它是一堆废话。
实验网站的结构是这样的:
实验的网站结构
我提供了唯一的内容，并确保每个锚/标题/alt，以及其他系数，都是全局唯一的(假词)。为了方便读者，在描述中，我不会使用像anchor cutroicano matestito这样的名字，而是将它们称为anchor1，等等。
我建议您在阅读本文时将上述映射打开到一个单独的窗口中。
第一部分:第一个链接计数
在这个SEO实验中，我想测试的事情之一是第一条链接计数规则——它是否可以被省略以及它如何影响优化。
第一个链接计数规则表示，在一个页面上，谷歌Bot只看到到子页面的第一个链接。如果在一个页面上有两个指向同一子页面的链接，则根据这一规则，第二个链接将被忽略。谷歌Bot在计算页面排名时，会忽略第二个链接和每个连续链接中的锚。
这是一个被许多专家广泛关注的问题，但这个问题尤其存在于网上商店，那里的导航菜单严重地扭曲了网站的结构。
在大多数商店中，我们有一个静态(在页面的源中可见)下拉菜单，例如，它提供四个到主要类别的链接和25个到子类别的隐藏链接。在映射页面结构的过程中，GB会看到所有的链接(每个页面上都有一个菜单)，这导致在映射过程中所有的页面都是同等重要的，它们的power (juice)被均匀地分配，大致如下:
最常见的不过在我看来，是错误的页面结构。
上面的例子不能称为正确的结构，因为所有的类别都是从所有有菜单的站点链接起来的。因此，主页以及所有类别和子类别都有相同数量的传入链接，整个web服务的威力也同样强大。因此，主页的力量(由于链接的数量，主页通常是大部分力量的来源)被分成了24个类别和子类别，所以每个类别只接收到主页力量的4%。
结构应该是怎样的:
如果您需要快速测试页面结构并像谷歌那样爬行，尖叫青蛙是一个有用的工具。
在本例中，主页的力量被划分为4个类别，每个类别接收到25%的主页力量，并将其中的一部分分配给子类别or