oovoo 发表于 2013-4-3 19:44:01

关于robots问题

User-agent: *
Disallow: /*?*
Disallow: /index.php
Disallow: /wp-admin
Disallow: /wp-content/plugins
Disallow: /wp-content/themes
Disallow: /wp-includes
Disallow: /trackback
Disallow: /feed
Disallow: /comments
Disallow: /category/*/page/
Disallow: /tag/*/page/


这是我的robots
然后通过gg管理员工具提交收录首页
结果这效果
求救阿......
现在gg直接搜索http://www.xxx.com 直接提示下面这段话了
由于此网站的robots.txt的，系统未提供关于该结果的说明- 了解详情。

yoo 发表于 2013-4-3 19:55:58

这个robots设置的问题应该在于Disallow: /*?* ，将这行删除或者修改掉再试试。

oovoo 发表于 2013-4-3 20:09:14

yoo 发表于 2013-4-3 19:55 static/image/common/back.gif
这个robots设置的问题应该在于Disallow: /*?* ，将这行删除或者修改掉再试试。

不该是这问题吧 应为我其他几个站robots 你也有Disallow: /*?* 但都正常

我在说具体点
昨天安装wp的时候 在安装的过程中选取了阻止搜索引擎搜录 然后我把插件 主题都调试好了后 然后再后台把阻止搜索引擎搜录选项取消了今天把网站加到GG管理员工具里提交网站地图的时候就出现URL restricted by robots.txt 这个提示 提交不了地图 但是那个时候我还没上传robots 我马上又直接搜索http://www.xxx.com 结果提示由于此网站的robots.txt的，系统未提供关于该结果的说明- 了解详情。后来我把自己其他网站的robots上传到这个站,后用Fetch as Google 提交域名 结果还是提示benied by robots.txt 现在找不到原因

seospider 发表于 2013-4-3 20:18:10

gg反应有点慢，过两天再去查查就收录了。:loveliness:

yoo 发表于 2013-4-3 20:18:14

这个问题可能是你GG一直用的是最早的robots文件造成的。即使你后来上传了新的robots.txt文件，但是他还是在用老文件，而没有用你新上传的文件。
如果是这个原因，等几天自然就好了。

oovoo 发表于 2013-4-3 20:21:48

好的 谢谢 大家了

dhdz187 发表于 2013-4-4 12:05:41

yoo 发表于 2013-4-3 20:18 static/image/common/back.gif
这个问题可能是你GG一直用的是最早的robots文件造成的。即使你后来上传了新的robots.txt文件，但是他还是在 ...

正解。。
页: [1]
查看完整版本: 关于robots问题