如何屏蔽Ahrefs抓取外链呢？

心晴 · 发表于 2015-8-24 19:06:59

我不想别人用ahrefs，moz, majestic来查询我的外链，如何屏蔽呢？谢谢。。

929156761 · 发表于 2015-11-16 09:56:13

robots你屏蔽只能屏蔽蜘蛛抓取你的网站，但是屏蔽不了她们的蜘蛛抓取别人的网站，也就是你发外链的那些网站,robots是解决不了的

luck · 发表于 2015-8-24 20:29:09

帮顶一下，记得我也问过这个问题，但没有解决。

c76y · 发表于 2015-8-24 20:43:16

屏蔽他们的蜘蛛
具体的自己再找找吧

seanhere · 发表于 2015-8-24 22:44:49

c76y 发表于 2015-8-24 20:43
屏蔽他们的蜘蛛
具体的自己再找找吧

+1 收集它们的bot user-agent, 在nginx中设置屏蔽，或者直用PHP代码屏蔽，不过有的bot的user-agent模拟普通浏览器就没辙了

wxmd · 发表于 2015-8-25 11:39:00

这个是很难真正屏蔽掉的

心晴 · 发表于 2015-8-25 14:44:27

c76y 发表于 2015-8-24 20:43
屏蔽他们的蜘蛛
具体的自己再找找吧

嗯，我找到了些ROBOT的设置。不知道可行不

心晴 · 发表于 2015-8-25 14:44:59

seanhere 发表于 2015-8-24 22:44
+1 收集它们的bot user-agent, 在nginx中设置屏蔽，或者直用PHP代码屏蔽，不过有的bot的user-agent模拟 ...

ROBOT的设置，不过听老外说，屏蔽不了

心晴 · 发表于 2015-8-25 15:16:25

wxmd 发表于 2015-8-25 11:39
这个是很难真正屏蔽掉的

嗯，且行且看吧

残缺的人生 · 发表于 2015-11-15 13:26:31

学习学习

		自动登录	找回密码
密码			立即注册

谷歌+Bing+TT+MSN官方代理	⚡️按条S5代理⚡️静态⚡️独享⚡️5G	需要代理IP?⚡️Proxysites.ai⚡️	指纹浏览器，就用AdsPower
Mediabuy⚡️玩家开户首选	【鲁班跨境通-自助充值转账】	FB/GG/TT❤️官方免费开户	Affiliate 全媒体流量资源⚡️
Taboola/Outbrain /Bing⚡️一级代理	*开户投流-724h❤️人工在线**	【官方】❤️搜索套利买量投流开户	独立站⚡️开户投放
FB BM不限额，短id账单户	E.PN 虚拟卡	DuoPlus专注打造跨境电商云手机	BINOM TRACKER 60% OFF!
比Adplexity还好用的Spy工具	ADPLEXITY + ADVERTCN	7200W全球动态不重复住宅IP代理	虚拟信用卡+独立站收款
全球虚拟卡, 支持U充值	Facebook 批量上广告	尤里改 - FB 稳定投放	免费黑五教程（持续更新、欢迎交流）
FB 三不限源头 - 自助下户充值转款	各种主页、账单户、BM户（优势）	⚡️个人户，bm户不限额，账单户	9Proxy ⚡️ $0.04/IP, 无限带宽
IPCola原生住宅IP⚡️$2.1/条双ISP	Google、Bing官方总代联盟流量开户	fb耐用号0.01一个	fb账号官方合作商
FB资源，账单户，分享户，国内一手	FB企业户BM户账单户源头	Try top ad formats from MyBid	Monetize your traffic with MyBid
全球超2亿的动/静态纯净住宅IP	GeeLark 最强云手机+指纹浏览器	广告位出租

[SEO] 如何屏蔽Ahrefs抓取外链呢？