robots.txt 和 seo 排名
有什么意义吗？ 一个只有一行内容的 robots.txt，如下所示
User-agent: *
与根本没有它相比？
is there any point in having
a robots.txt with just one line of content like below
User-agent: *
compared to not having it at all ?
如果你对这篇内容有疑问，欢迎到本站社区发帖提问 参与讨论，获取更多帮助，或者扫码二维码加入 Web 技术交流群。
绑定邮箱获取回复消息
由于您还没有绑定你的真实邮箱，如果其他用户或者作者回复了您的评论，将不能在第一时间通知您！
发布评论
评论（2）
不;这样做是没有意义的。
No; there is no point in doing that.
不，谷歌（我们不要拐弯抹角，谷歌是你应该关心的搜索引擎）默认情况下会抓取所有内容，除非你告诉它不要这样做。
如果您想帮助 Google，请使用 Google 网站站长工具并以正确的格式提交站点地图
http://www.google.com/support/webmasters/bin/answer.py?hl=zh-CN&answer=156184
No, google (and let's not beat around the bush, Google is the search engine you should care about) by default will crawl everything unless you tell it not to.
If you want to help Google, use google webmaster tools and submit a sitemap in the correct format
http://www.google.com/support/webmasters/bin/answer.py?hl=en&answer=156184