我不想让我的Disclaimer页面被收录,应如何做?谢谢!
我不想让我的Disclaimer页面被收录,应如何做?谢谢!robot.txt
.............................. 妖妖 发表于 2017-4-18 09:30
robot.txt
..............................
谢谢!
Disallow: /Disclaimer/
这种写法对不? meta=noindex <META NAME="ROBOTS" CONTENT="INDEX,FOLLOW">:可以抓取本页,而且可以顺着本页继续索引别的链接
<META NAME="ROBOTS" CONTENT="NOINDEX,FOLLOW">:不许抓取本页,但是可以顺着本页抓取索引别的链接
<META NAME="ROBOTS" CONTENT="INDEX,NOFOLLOW">:可以抓取本页,但是不许顺着本页抓取索引别的链接
<META NAME="ROBOTS" CONTENT="NOINDEX,NOFOLLOW">:不许抓取本页,也不许顺着本页抓取索引别的链接
<META NAME="ROBOTS" CONTENT="NOFOLLOW">:不许抓取本页,也不许顺着本页抓取索引别的链接 可以用meta 或者 robots.txt
页:
[1]