robots.txt 文件中允许和禁止

发布于 2024-09-11 02:07:22 字数 159 浏览 4 评论 0原文

我想禁止 SE 机器人访问我网站上的所有文件和文件夹,但其中的特殊文件夹和文件除外。 我可以在 robots.txt 文件中使用这些行吗?

User-agent: *
Disallow: /
Allow: /thatfolder

对吗?

I want to disallow all files and folders on my site from SE bots, except a special folder and files in it.
Can I use these lines at robots.txt file?

User-agent: *
Disallow: /
Allow: /thatfolder

Is it right?

如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。

扫码二维码加入Web技术交流群

发布评论

需要 登录 才能够评论, 你可以免费 注册 一个本站的账号。

评论(1

一页 2024-09-18 02:07:22
User-agent:* 
Allow: /thatfolder
Disallow: /

这应该可以。 (只是改变了顺序)

User-agent:* 
Allow: /thatfolder
Disallow: /

This should do. (just changed the order)

~没有更多了~
我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
原文