在正确的时间和地点，noindex标记可以是一个美妙的事情。不幸的是，有次在那里它可能会导致问题。
在过去的几年中，我有机会到工作运行到数亿一些与页数网站。为什么人们让他们的网站成长到这样的规模的原因是多种多样的。下面是一些比较常见的原因，这最终发生的事情：
出版商试图最大化长尾术语他们的能力等级。
出版商认为，提供改进的大规模水平是良好的用户体验。
该网站使用不受约束的标签系统，使标签（甚至明确不合逻辑的组合）的任意组合，以创造独特的新页面。
该网站执行中有导致被无意创建的页面错误。
当网站发展这一大的，它往往意味着许多网页中，有很少的赎回价值，或者在给定的部分页面组之间的差异几乎微不足道。
举个例子，一个关于“大小10蓝左旋洗瓶小部件”和“大小10个绿色左手洗瓶部件页。“用户可能想选择自己的颜色，但真的不应该要求一个全新的网页的创建。我所看到的情况下的总页数，以可以说是有用的页的比例高达10：1的！
具有这类网页的问题是，它可能会导致？您的？网站？被谷歌标记为薄内容。这可能意味着可视性的损失，由于？熊猫算法？或甚至手动罚。？这些都不是一件好事！
为了避免处罚的情况的一种方法是把索引标记的网页上，你不希望被纳入谷歌的索引。假设您可以识别所有的页面可能导致谷歌的关注，这将消除人工惩罚的由熊猫算法的风险或者被打，但是这是不够的。让我们来探讨的三个主要原因：
1。稀释的PageRank焦点。？一个常见的情况是，“坏”的网页链接到的产品列表中。
当此得到妥善处理，在此列表中指向页面的链接如下图所示，是非常密切的关系，并在页面的链接上，值得指数高度相关，：
现在有机会，您的网站的每个页面都将有一些链接，指向你的主页，你的“关于我们”页面，您的“联系我们”页面，隐私政策以及其他一些不注重局部页面如。
不要误会我的意思，这些链接网站结构的重要组成部分，所以让他们有一个很好的事情。然而，局部的相关导航路径中的链接到这些产品页面（“外用相关链接，以礼金的网页”）是？真正的宝物。你不想浪费他们。
当一些在产品列表的链接是不值得被索引的网页的问题开始。你可以解决相关的问题与索引标记的点球，但你会浪费一些的PageRank。下面是一个例子页面来说明这个问题：
在这个例子中图像的上方，？我们的外用相关链接，以礼金页面的20％都指向一个页面noindexed。这PageRank是基本上完全浪费。为什么？ 让我们来看看这个noindexed页面上会发生什么：
一些的PageRank是由noindexed页面本身的消耗，即使noindexed页面仍然可以通过PageRank的其余出通过链接其他页面，大多数这些链接会比你的礼金网页其他网页我显示该示例图像上方。
2。PageRank的传入永不永不地。？从外用相关链接，以礼金页面浪费PageRank是够糟的了，但它不是唯一的问题。超大型网站上，你可以有一种情况，谷歌不会抓取你的整个网站，如下所示：
由于该图像中显示，谷歌达到这种地步的抓取会停止。它只是决定有现场为它去任何进一步的页数太多。然而，在树的底部，其中抓取会停止仍在传递PageRank的网页，他们必须到其他页面，谷歌还没有，将来也不会爬行。这PageRank是有效地传递到永不永不土地，它的浪费以及。
3。嚼了抓取带宽。？谷歌还在与抓取页面上的索引标记网页。如果你有被noindexed的网站网页的很大比例，谷歌将花时间来抓取这些网页，而不是抓取页面，它实际上可能排名为你。
这可以伤害你，当你做你希望谷歌看到和过程中，或当你添加一个新的部分，以在网站上你的网站的重大变化。对于大多数网站，谷歌只抓取在某一天该网站的一小部分，所以有它花时间在自己的“爬行预算”的一部分上已经没有任何意义对他们的网页可以大大降低发现伟大的进程缓慢你取得了新的变化。
另一种解决方案，以noindex标记是实现谷歌的相对=规范的标签，告诉谷歌特定网页被认为是一个副本或其他页面的一个子集。原则上，这是伟大的，因为它会保存所有与该页面相关联的的PageRank，并将其传递回在标签链接到页面。有两个问题：
相对=规范，就是要在情况下，只有用在与它的标签页是一个严格的页面的副本或子集，其标签链接。在情况下使用它，如果做不到，不建议的情况下。
即使你设法应付的网页是你想保留的网页严格的子集，谷歌认为相对=规范只是一种建议，它可以选择忽略建议。这是不幸的是，不是少见，在我的经验发生了很多在这些非常大的网站的情况。
有时候，你刚才不得不采取对清理陷入困境的任务。它也可以支付巨大的回报，如该交通图中：
我们以90％以上的降低本网站上的网页数量，从数以百万计的页面数千万。它看起来像谷歌喜欢它！
一种？显著的开发工作将为了理顺这种需要？风云出； 然而，我的经验是，一般的奖励证明的努力。
在这篇文章中所表达的意见是那些客人笔者并不见得搜索引擎土地。作者的工作人员在这里列出。