thinkphp5开发的网站pc和移动网站怎么配置robots和sitemap文件路径？
问题描述 使用thinkphp5开发的网站包含pc和m站。域名是这样举个例子：www.domain.com和m.domain.com，现在想针对这两个域名分别做robots和sitemap，…
WordPress中屏蔽所有txt文件的访问后，如何允许虚拟robots.txt的访问？
介绍：Nginx下WordPressNginx中设置禁止所有txt的访问（方法）如果使用真实存在的robots.txt文件，上面的方法有效，但是网站使用的是WordPress，使用…
robots设置全部禁止，但是页面meta用index,follow有何效果？
网站使用了wordpress，之前wp每天都被大量ip扫描，扫描的都是wp特有的目录，比较针对。后来把robots删掉了，没想到没再被恶意扫描了。这样保持了大概1…
谷歌站长工具中robots.txt工具，这是在提示什么错误？
我觉得和我查看到的代码中并没有这个红点。也就是说第一个字符是# PS:有声望的人希望添加标签比如：google-webmasters 或者 谷歌站长工具 没有权限的…
用RIDE 工具写自动化测试脚本
上述脚本报错：The result of the xpath expression "/html/body/div[7]/div[2]/div[2]/div[2]/div[1]/ul/li[1]/text()" is: [object Text]. It shou…
robots.txt 书写疑问
目前内容页面的首页为 www.xxx.com/t.html ,翻页后为 www.xxx.com/t-#.html （* 为 ID ，# 为页码）。我想要搜索引擎只收录内容页面的首页，而不收录…
在向谷歌验证sitemap时 提示robots.txt unreachable
这是我的robots地址：http://share.zhbor.com/robots.txt 在谷歌提交时出错提示：Network unreachable: robots.txt unreachableWe were unable to cr…
- 共 1 页
- 1
