|
发表于 2022-12-29 17:47:24
|
显示全部楼层
个人建议用python搞采集,python的scrapy框架搞采集非常方便。而且python跨平台,可以直接部署到linux的vps上通过cron定时运行。最重要的是python的库非常多,想要的功能直接网上就能找到相应的库,开发效率绝对比易语言高。) B8 w' {) b; T2 {3 S. L
翻译github上也有python的谷歌翻译接口,直接拿来用。
& n+ @, S0 _8 H3 x( B$ f: t) e; ?1 Z f9 J9 _
选定好一个niche再进行采集,感觉现在采集站还是可以搞的,不要追求内容的数量,你的网站采集多了垃圾内容在谷歌眼里也成了垃圾站了,搜录全删光光。2 h* h* C8 y% t. q$ u* ]$ T
7 ]$ f/ t5 Z6 c3 }8 Z" Q u
网站程序直接用wordpress,毕竟是wordpress全世界使用最多的cms,很多坑都别人踩过了,遇到问题也好解决。或者直接用hexo、hugo等直接生成静态网站。
d5 K4 l; ^( j6 w$ X4 t
1 E! q% ]" E3 r9 U s前期资金紧张,可以用国外的免费图床,HTTP抓包后自己写接口上传图片。后期发现网站流量不错,再把图片本地化。有的图床有反盗链,自己进行反代,简单可以用 https://wsrv.nl/?url= 代理访问,不行的自己写个接口伪造来路、user-agent后大部分都可以访问。, ]9 j2 H/ _, d9 m4 n% w
0 G! u: ?+ l! x7 Z5 E2 M# n
我就是搞的那种小型的采集站,以后准备继续扩大规模,展示下我的采集站, 这是最多的一个每天2000多ip:
1 Q3 @: m/ r, I+ a4 {7 d5 A* z+ k1 d+ _/ s, E
纯纯的采集,文章也就几千篇,爬虫放在vps上定时任务去采。2 m' u0 _& o8 ~4 W ]$ z
: ?5 P, f4 I2 W2 X: h7 B5 D$ m7 n% n
: Z3 H% F( Q" F' H( P3 ^ T* @7 |* S& C: z7 q. o$ s, @
采集后调用谷歌翻译整的英文垃圾站,内容不到5000,平均每天100多ip,就整了一个翻译的站,感觉批量搞搞应该还行,以后在整。# }/ |% f: _2 i
5 g1 L5 x: T5 v3 I爬虫全部署到vps定时采集,网站基本每天更新,总之一切都要全自动,以后才能批量搞!
% F. y$ ~4 W0 f# b4 I) S. Y7 } |
本帖子中包含更多资源
您需要 登录 才可以下载或查看,没有账号?立即注册
x
评分
-
查看全部评分
|