xu6882611 发表于 2023-1-11 17:16:47

如何屏蔽fofa.info这样的安全搜索引擎采集网站的信息

如题。
通过这个搜索引擎，发现好几个同行网站，且名下有多个网站使用相同adsense CA-PUB-XXX号。
在使用CF的情况下如何屏蔽这个爬虫？



河小马 发表于 2023-1-11 19:09:46

一般屏蔽相应的UA或者ASN就可以了
页: [1]
查看完整版本: 如何屏蔽fofa.info这样的安全搜索引擎采集网站的信息