此 robots.txt 代码会禁止所有搜索引擎吗？
我想知道此代码是否不允许每个搜索引擎扫描我的目录。
User-agent: *
Disallow: /
此代码是否也使用新的 htlm 5 协议进行更新？
<META NAME="ROBOTS" CONTENT="NOINDEX, NOFOLLOW">
真的有用还是不再需要了？
I would like to know if this code disallow every search engine to scan my directory.
User-agent: *
Disallow: /
also does this code is updated with the new htlm 5 protocole ?
<META NAME="ROBOTS" CONTENT="NOINDEX, NOFOLLOW">
Really useful or not needed anymore?
如果你对这篇内容有疑问，欢迎到本站社区发帖提问 参与讨论，获取更多帮助，或者扫码二维码加入 Web 技术交流群。
绑定邮箱获取回复消息
由于您还没有绑定你的真实邮箱，如果其他用户或者作者回复了您的评论，将不能在第一时间通知您！
发布评论
评论（1）
不，它只会阻止那些遵守 robots.txt 协议的人（存在故意违反 robots.txt 来查找“隐藏”内容的搜索引擎）。
然而，它会阻止普通消费者使用的绝大多数搜索引擎看到它。
No, it'll only stop those that obey the robots.txt protocol (there exist search engines that intentionally disobey robots.txt to find "hidden" stuff).
It will however stop the vast majority of search engines that your average consumer would use, from seeing it.