robots.txt 的正则表达式
我正在尝试设置 robots.txt，但我不确定正则表达式。
我有四个不同的页面，全部以三种不同的语言提供。我想我可以使用正则表达式，而不是列出每个页面乘以 3。
nav.aspx
page.aspx/changelang（可能附加一个查询字符串，例如“?toLang=fr”。）
mypage.aspx?id 和
login.aspx/logoff （=12346？...等等 - 每次都不同）
！所有四种语言均采用 3 种不同语言，例如：
www.example.com/es/nav.aspx
www.example.com/it/nav.aspx
www.example.com/fr/nav.aspx
现在，我的问题是：以下正则表达式正确吗？
User-Agent: *
Disallow: /*nav\.aspx$
Disallow: /*page.aspx/changelang
Disallow: /*mypage\.aspx?id
Disallow: /*login\.aspx\/logoff
谢谢
I am trying to set up my robots.txt, but I am not sure about the regexps.
I've got four different pages all available in three different languages. Instead of listing each page times 3, I figured I could use a regexp.
nav.aspx
page.aspx/changelang (might have a query string attached such as "?toLang=fr".)
mypage.aspx?id and
login.aspx/logoff (=12346?... etc - different each time)
! All four in 3 different languages, e.g:
www.example.com/es/nav.aspx
www.example.com/it/nav.aspx
www.example.com/fr/nav.aspx
Now, my question is: Is the following regexp correct?
User-Agent: *
Disallow: /*nav\.aspx$
Disallow: /*page.aspx/changelang
Disallow: /*mypage\.aspx?id
Disallow: /*login\.aspx\/logoff
Thanks
如果你对这篇内容有疑问，欢迎到本站社区发帖提问 参与讨论，获取更多帮助，或者扫码二维码加入 Web 技术交流群。
绑定邮箱获取回复消息
由于您还没有绑定你的真实邮箱，如果其他用户或者作者回复了您的评论，将不能在第一时间通知您！
发布评论
评论（1）
robots.txt 中不允许使用正则表达式，但 Googlebot（和其他一些机器人）可以理解一些简单的模式匹配：
您的 robots.txt 应如下所示：
User-agent指令小写有效一个。您不必转义.或“/”。您可以在此处了解有关此内容的更多信息：使用 robots.txt 文件阻止或删除页面
Regular Expressions are not allowed in robots.txt, but Googlebot (and some other robots) can understands some simple pattern matching:
Your robots.txt should look like this:
User-agentdirective is valid with lower casea. You don't have to escape.or `/'.You can read more about this here: Block or remove pages using a robots.txt file