网站站长工具中的 /a 文件夹出现 404 错误

Question

在 Google 网站管理员工具中，在抓取错误下，我的第一个 404 错误是“

www.domain.com/a 

我的网站中没有这样的东西，也没有指向它的链接”。出了什么问题，这是什么意思？在站点日志中，没有关于指向/a的404错误的错误。 W3C 检查器显示没有错误。我能做些什么？

Answer 1

不是你，一定是 Googlebot。 （这些都与 php 无关；也许有人可以删除 php 标签。）

我的 Google 网站管理员工具中有 8 个网站，而两个完全不相关的网站也显示了同样的内容。显示此问题的两个网站均不使用 PHP。

我唯一能想到的是 Google 机器人错误地解析了 HTML，并以某种方式将结束“a”标签附加到根 URL 上。听起来很愚蠢，但这是唯一可以解释此问题的多个不相关实例的方法。

有人在 Google 论坛中就此问题发起过讨论吗？

我不确定这会产生什么影响已经解决了根本问题，但我将其放入我的 htaccess 文件中，希望能够清除错误的 404 错误。 （编辑：这是 Google 推荐的解决方案。）

Redirect 301   /a   http://www.mysite.com

---

编辑：

向 Google 帮助论坛报告：

http://www.google.com/support/forum

---

编辑 2：

两个站点都经过 W3C 验证，并且都不使用 PHP。

---

编辑3：

“/a”来自 jQuery v1.5.2 内部。这是根本原因。

在 jQuery 本身中有这一行...

<a href='/a' style='color:red;float:left;opacity:.55;'>a</a>

---

编辑 4:

使用 robots.txt 文件阻止它。 （根据 Google 的说法，这只会将网站管理员工具抓取错误从“404”更改为“被 robots.txt 阻止”）

Disallow:  /a/
Disallow:  /a

---

编辑 5：

以下是Google 员工 JohnMu 在 我在 Google 网上论坛发起的帖子。看来我还是要坚持301了。

穆约翰

Google 员工

凌晨 4:39

大家好

对此只有一个简短的说明 - 是的，我们
许多人都选择了“/a”链接
来自 jQuery JavaScript 的站点。然而，
这通常不是问题，如果我们
将“/a”视为 404，那么那就是
对我们来说很好。与其他 404-URL 一样，
我们会将其列为抓取错误
网站站长工具，但同样，这不是
爬行会出现问题，
索引或排名。如果你想
确保它不会触发
网站站长工具抓取错误，然后我
建议只使用 301 重定向
该 URL 到您的主页（不允许
URL 也会将其显示为
抓取错误 - 它将被列为
robots.txt 不允许的 URL）。

我也建议不明确
禁止抓取 jQuery
文件。虽然我们一般不会
单独索引它，我们可能需要
访问它以生成良好的 Instant
您网站的预览。

总结一下：如果您看到“/a”
在网站管理员的抓取错误中
工具，你可以把它留下来
那，它不会造成任何问题。如果
你想把它从那里删除，你
可以进行 301 重定向到您的
主页。

干杯

约翰

Answer 2

检查您的 Apache 错误日志。或者安装一个保存 $_SERVER["HTTP_REFERER"] 的小 PHP 文件，如下所示：

<?php

$f = fopen("logfile.txt", "a");
fwrite ($_SERVER["HTTP_REFERER"] . "\n");
fclose ($f);

然后创建一个 .htaccess 文件以将对 /a 的调用重定向到此 PHP：

Options FollowSymLinks
RewriteEngine On
RewriteRule ^a$ somthing.php

或者，您可以可以将您的 PHP 保存在名称 /a/index.php 上，这样您就不需要重定向。

Answer 3

执行 301 重定向或以其他方式从您的网站站长工具帐户发出 URL 删除请求。

GWT-->站点配置-->抓取访问-->网址删除请求