回复：5点。这里假设你在谈论阻止通过机器人的所有访问。TXT，与Noindex元不限制索引。我见过的情况下，人们不希望重复的内容重定向，E。G。当内容被不同品牌的网站的不同部分。假设你有一个蓝色小工具一节和红色小部件部分，关于蓝色和红色的小部件的一篇文章。您可能需要在网站内的人类访客，以能够同时访问，所以你不能在文章的蓝色小工具品牌版本重定向到红色品牌文章。你也越来越推回上使用rel =规范，因为网站所有者仍然不相信它会工作，这是很公平：我们真正有迄今是搜索引擎的话。
不过，该网站拥有者准备没收搜索流量的网页之一，以避免重复的内容，并确保重要页面的高排名。如果抛出一个NOINDEX，遵循不太重要的页面标签，该网页上的所有链接将仍然被抓取，它会传递PageRank。当然，它会积累的PageRank是“浪费”从以往任何时候都能够排名的角度来看，但肯定NOINDEX，后续值得考虑。