如果您在页面 HTML 的 head 元素的元机器人标记中指定“noindex, nofollow”，您将获得相同的爬行优势，每个人都会微笑。 您不希望编入索引的新重复页面将不会被编入索引，并且 PageRank 问题将得到解决。 但几年前，谷歌表示： 好吧，我们没有意识到的是，随着时间的推移，这些页面的抓取实际上越来越少。因此，您最终将不再看到这些链接，并且最终将不再对它们进行爬网。 换句话说，他暗示它将不再作为继续传递 PageRank 的方式，并且最终将被视为与 noindex、nofollow 情况相同的方式。
化标签只会稍微降低抓取频率
因此，这种方法也不是很可靠。 rel =“规范” 在这 印度数据 种情况下，URL 规范化标签可能是各方面的最佳选择。方法是在每个页面的HTML head元素中的link元素的rel属性中指定canonical来指定规范的URL。 随着时间的推移，使用 URL 规范化标签只会稍微降低抓取频率。精彩的。你可以做索引。精彩的。尽管如此，PageRank 仍然可以移交。 看起来是一件很棒的事情。在很多情况下看起来都很完美。 然而，这只适用于足够相似的页面，Google 会认为它们是重复的并尊重 URL 规范化标签。
重定向 我将不再链接到此页面
如果 Google 不认为它重复，您可能需 菲律宾电话号码列表 要重新使用 noindex。 另外，对于似乎没有理由存在的 URL，目前还不清楚这些奇怪的组合是如何创建的，但它们似乎完全没有意义。 301重定向 我将不再链接到此页面。然而，如果有人仍然设法找到该 URL，301 重定向是一种简单的方法，而且结果可能会非常好。简而言之，所有对该 URL 的访问都将被强制重定向到另一个 URL。 即使 Google 时不时地来检查您，它仍然会遵循 301 重定向，因此您甚至不必查看该页面。
