osun 发表于 2019-2-21 08:50:14

寻求合作:爬取了大量Google搜索结果

严格来说应该是采集了Google的搜索结果,根据关键词得到搜索页面,把搜索结果保存到数据库。原理很简单,但是研究Google的大牛应该都知道,Google的反爬能力是很厉害的,爬不了几页就会被屏蔽IP,想要大量抓取Google的搜索结果是很困难的,小弟研究Google多年,终于解决了这个问题,现在寻求大牛合作,把这一成果利用起来。另外小弟还破解了文档分享站scribd的加密算法,可以根据文档预览页面地址获取到文档的直接下载地址,欢迎大牛前来指导合作,站内消息或者QQ:26917373

电仔 发表于 2019-2-21 11:23:40

技术上很牛哦!但是我想不到google大量结果有啥用?拿来做垃圾站?
scribd这个破解掉用处很大的,随便抓取一个细分领域书本做成关键字都是一个专业站了。

abbey0812 发表于 2019-2-21 11:49:08

仰观楼上各位大牛!:lol

54clz 发表于 2019-2-21 11:55:44

牛                           

osun 发表于 2019-2-21 12:13:03

电仔 发表于 2019-2-21 11:23
技术上很牛哦!但是我想不到google大量结果有啥用?拿来做垃圾站?
scribd这个破解掉用处很大的,随便抓 ...

目前就是采集的google的搜索结果做的垃圾站,按照关键词采集了100万页,但是流量掉的快,一个月流量就掉的差不多了,网站也没有被google干掉,还能搜索到,估计是被降权了

123jj 发表于 2019-2-21 13:37:49

osun 发表于 2019-2-21 12:13
目前就是采集的google的搜索结果做的垃圾站,按照关键词采集了100万页,但是流量掉的快,一个月流量就掉 ...

这种垃圾站好久以前就有了,现在不好做,我现在也有这样做,没啥流量,收录也没以前快和多了,而且掉得快

电仔 发表于 2019-2-21 13:40:18

123jj 发表于 2019-2-21 13:37
这种垃圾站好久以前就有了,现在不好做,我现在也有这样做,没啥流量,收录也没以前快和多了,而且掉得快 ...

嗯,之前google搜索会经常搜出垃圾站,现在很难搜索出来, Google改过算法优化过

xkangyi 发表于 2019-2-21 14:22:48

大量采集的话估计很快就会失效

科学外贸老王 发表于 2019-2-21 16:13:51

第一个是国外很多seo工具具有的功能
例如semrush
但是semrush的功能多很多

第二个可以做内容采集工具 然后出售

bluescharp 发表于 2019-2-21 17:49:31

如果是用代理采集,那类似的工具太多,而且太吃代理,跟别的工具没什么区别了。
如果能大规模采集,那简直是金矿了...随便想到的工具类型有rank checker, keyword research,ad spy, spam。每一类工具都有各种细分的需求,个性化的需求更数不胜数了...

osun 发表于 2019-2-21 19:53:42

bluescharp 发表于 2019-2-21 17:49
如果是用代理采集,那类似的工具太多,而且太吃代理,跟别的工具没什么区别了。
如果能大规模采集,那简直 ...

可以大规模采集,你只管提出需求,其他的就交给我。。。

newcb 发表于 2019-2-21 21:43:52

这个技术做垃圾站比较好。
页: [1]
查看完整版本: 寻求合作:爬取了大量Google搜索结果