结构化数据标签的生成无法通过GoogleBot在Angular Spa应用程序上查看
在Google搜索控制台上实时测试URL时，GoogleBot可以呈现页面，但我的结构化数据丢失了。它是在JS中生成的： insertStructuredData(genDataFn: Functio…
PHP重定向如果用户来自Google搜索
我可以检测用户是从Google Chrome还是Google搜索中单击我的网站并重定向？ 我知道我可以通过此功能检测Chrome用户： if (strpos($_SERVER['HTTP_USER_…
Googlebot 如何解释我的网址
我有一个关于谷歌爬虫（googlebot）在这种情况下将如何做的问题： http://www.url.com?query=something#!somethingelse 这会吗改为： http://www.url.…
是否可以找到谷歌机器人何时抓取我网站上的任何网址并记录服务器上文本文件的上次访问时间
下面是一个代码，每当谷歌抓取任何页面并导致邮箱垃圾邮件时，该代码都会发送一封电子邮件。那么是否可以在服务器上的文本文件中记录上次爬行的时间戳…
Googlebot 可以绕过 reCAPTCHA 验证吗？
Closed. This question is off-topic. It is not currently accepting answers. 想要改进此问题吗？更新问题，使其关于- Stack Overflow 的主题。 12…
当 Googlebot 请求“?_escaped_fragment_=”网址时，它如何知道网络服务器没有隐藏？
对于 Google 的 AJAX 抓取规范，如果服务器返回 #! URL 的一个内容（即 JavaScript 密集型文件）和其他其他内容 em>（即页面的“html 快照”）发送给 …
网站站长工具爬虫403错误
Google 网站管理员工具报告网站服务器上某些文件夹的 403 错误，例如： http://www .philaletheians.co.uk/Study%20notes/ 该文件夹未被禁止，所以不…
如何使用通配符阻止机器人对此进行索引？
我有以下 URL 格式： example.com/page/m6aoeh/embed 想阻止任何机器人使用 URL /page/*/embed 索引任何页面 我 我假设有某种方法可以阻止通配符 URL…
Google 仍然将我的域名编入索引吗？
我有一个像下面这样的 robots.txt，但 Google 仍然为我的域名编制了索引。基本上他们已经索引了 mydomain.com 但没有索引 mydomain.com/any_page User…
为什么请求在被 googlebot 抓取时抛出异常，但在粘贴 URL 时却不会抛出异常？
我的事件日志中收到了大量此类异常。 EVENT ID: 1309 Event code: 3005 Event message: An unhandled exception has occurred. Event time: 12/12/201…
googlebot在抓取时会保留会话吗？
当googlebot抓取页面时它有会话吗？例如，我在会话中存储一些变量并在我的网站页面中使用它们。当 googlebot 抓取这些页面时，我还会有会话变量吗？在…
根据URL参数限制Google机器人的访问
例如，我有以下链接： http://broodds.com/index.php/en/component/bet/?view=oddsdetails&bet_id=4e9dc53b96df3&odds=q1 如果view是oddsdetails，我…
