JavaScript 重定向会导致搜索引擎出现不需要的结果

Question

我有一个 HTML5 演示网站 (http://html5beats.com/)，它使用 JavaScript 来检测某些 HTML5 功能。如果这些功能不存在，我会重定向到“请更改或升级您的浏览器”页面，因为它们对于网站的正常运行至关重要。

问题是一些搜索引擎（特别是谷歌）似乎遵循重定向。这会导致“不支持您的浏览器”消息成为我网站的主要搜索结果。

我是否错误地使用了 JavaScript 重定向？我可以做些什么来告诉 Google 和其他搜索引擎哪个页面包含主要网站内容？

Answer 1

首先，您应该使用 robots.txt 告诉搜索引擎您不想列出的网页：

• http://www.google.com/support/webmasters/bin/answer.py?answer=156449

其次，您还可以向 Google 提供帮助（和其他搜索引擎）通过提供站点地图来了解您的网站：

• http://www.google.com/support/webmasters/bin/answer.py?answer=156184

第三，您还可以考虑一种快速而肮脏的方法来捕获 Google 机器人（以及其他网络抓取工具） ）通过 JavaScript 中的 navigator.userAgent 属性并防止在这些情况下重定向：

• http://www.useragentstring.com/pages/Crawlerlist/

在最后一种情况下，不要直接比较 navigator.userAgent 字符串。相反，使用 indexOf 在用户代理字符串中查找标识 URL，例如：

function upgradeRedirect() {
 if (navigator.userAgent.indexOf("http://www.google.com/bot.html") != -1) return;
 document.location.href = 'upgrade.html';
}

Answer 2

这实际上取决于您向 Googlebot 提供的内容（考虑到 Googlebot 所抓取的用户代理）。也许更好的策略是使用常规标题标签等加载常规内容，然后如果用户不支持 html5，并提供一些下载 html5 浏览器的链接，则在页面上弹出模式对话框。这样，您的列表对于网站来说仍然看起来很受人尊敬：http://html5beats.com/。顺便说一句——我真的很喜欢你的网站/想法。