AdvertCN - 广告中国

 找回密码
 立即注册

QQ登录

只需一步,快速开始

 谷歌+Bing+TT+MSN官方代理 
⚡️按条S5代理⚡️静态⚡️独享⚡️5G⚡️最干净<Wifi住宅+5G移动>IP代理指纹浏览器,就用AdsPower
Mediabuy⚡️玩家开户首选【鲁班跨境通-自助充值转账】FB/GG/TT❤️官方免费开户Affiliate 全媒体流量资源⚡️
Taboola/Outbrain /Bing⚡️一级代理开户投流-7*24h❤️人工在线【官方】❤️搜索套利广告开户独立站⚡️开户投放
DuoPlus专注打造跨境电商云手机E.PN 虚拟卡BINOM TRACKER 60% OFF!比Adplexity还好用的Spy工具
MediaGo+Taboola+Ob开户百度国际MediaGo⚡️让产品狂奔全球百度国际,高点击转化,快速放量百度国际MediaGo,独家原生流量
ADPLEXITY + ADVERTCN7200W全球动态不重复住宅IP代理虚拟信用卡+独立站收款全球虚拟卡, 支持U充值
Facebook 批量上广告尤里改 - FB 稳定投放免费黑五教程(持续更新、欢迎交流)FB 三不限源头 - 自助下户充值转款
各种主页、账单户、BM户(优势)⚡️个人户,bm户不限额,账单户一手BM分享户不限额9Proxy ⚡️ $0.04/IP, 无限带宽
IPCola原生住宅IP⚡️$2.1/条双ISPFB二三解0.1元一个虚拟卡|PTM星际卡FB专用虚拟卡
Google、Bing官方总代  联盟流量开户FB账号资源/稳定靠谱/运行5年啦FB开户代投/三不限/白名单广告位出租
楼主: gatsby

[讨论] 做大型多语言采集站哪种方案好些?

[复制链接]

27

主题

322

广告币

471

积分

中级会员

Rank: 3Rank: 3

积分
471
发表于 2020-10-3 22:44:09 | 显示全部楼层
没接触过千万级内容的站,不过我估计,首先程序肯定得是自写的了,起码魔改,要不然很多地方都不合你的需求。其次对你整个流程的架构都是个考验,从硬件到软件,从采集到节点。
+ ?0 H5 |* i4 h3 }, g6 |* A8 C8 I6 }/ o  G& W
另外啊,其实国外内容站很不好做,你要知道google是面向全球,资讯站早已极大丰富,基本上什么内容都很完整且优秀,完全饱和了。光靠采集翻译什么的,九成九是没排名的,跟国内内容荒漠的网络环境完全不是一回事。所以论坛内大佬都跑CPS那些赚分成。

点评

确实是这样,对各方面都是个考验,就当时个学习的历程。人们收入下降消费欲望降低,cps同样也不好做。跟不上时代,处于逐渐被淘汰的边缘,做什么都不容易,难。  详情 回复 发表于 2020-10-3 23:22
回复 支持 反对

使用道具 举报

27

主题

1343

广告币

1933

积分

高级会员

Rank: 4

积分
1933

社区QQ达人

 楼主| 发表于 2020-10-3 23:22:21 | 显示全部楼层
buyabag 发表于 2020-10-3 22:44
3 z8 b# T3 @$ G4 h9 H8 y没接触过千万级内容的站,不过我估计,首先程序肯定得是自写的了,起码魔改,要不然很多地方都不合你的需求 ...

$ Y5 F+ v! D" v( k确实是这样,对各方面都是个考验,就当时个学习的历程。人们收入下降消费欲望降低,cps同样也不好做。跟不上时代,处于逐渐被淘汰的边缘,做什么都不容易,难。
回复 支持 反对

使用道具 举报

6

主题

67

广告币

249

积分

初级会员

Rank: 2

积分
249
发表于 2020-10-4 15:25:49 | 显示全部楼层
wordpress不要说千万级了,连50w就很困难了,特别是用lnmp

点评

正是准备使用lnmp搭建wordpress,这可如何是好  详情 回复 发表于 2020-10-4 21:24
✅✅✅英文SEO微博 https://weibo.com/1865108982
回复 支持 反对

使用道具 举报

27

主题

1343

广告币

1933

积分

高级会员

Rank: 4

积分
1933

社区QQ达人

 楼主| 发表于 2020-10-4 21:24:24 | 显示全部楼层
比特人 发表于 2020-10-4 15:251 G2 Y/ u5 a# A/ [
wordpress不要说千万级了,连50w就很困难了,特别是用lnmp
# M. w. ^2 h7 b$ X: j* C5 L& q
正是准备使用lnmp搭建wordpress,这可如何是好

点评

别想那么远,干了再说,说不定你几万数据时候就已经放弃这个站了  详情 回复 发表于 2020-10-4 22:31
回复 支持 反对

使用道具 举报

19

主题

1098

广告币

2011

积分

高级会员

Rank: 4

积分
2011

社区QQ达人

QQ
发表于 2020-10-4 22:31:08 | 显示全部楼层
gatsby 发表于 2020-10-4 21:24" e7 ~0 Z% X, [2 a$ ~; F2 ?
正是准备使用lnmp搭建wordpress,这可如何是好

2 R4 f# F6 g: z' X4 u, b别想那么远,干了再说,说不定你几万数据时候就已经放弃这个站了
努力奋斗
回复 支持 1 反对 0

使用道具 举报

27

主题

1343

广告币

1933

积分

高级会员

Rank: 4

积分
1933

社区QQ达人

 楼主| 发表于 2020-10-4 22:56:07 | 显示全部楼层
laoyebin 发表于 2020-10-4 22:31; X$ ^  U% C- H$ j" n& k5 |
别想那么远,干了再说,说不定你几万数据时候就已经放弃这个站了

( a  x4 g* C% G. L5 s8 M. ]$ y' I不错,干了再说
回复 支持 反对

使用道具 举报

52

主题

739

广告币

1401

积分

高级会员

Rank: 4

积分
1401

社区QQ达人

发表于 2020-10-5 20:35:11 | 显示全部楼层
量大调用API根本不现实,不管是google还是其他引擎都是要钱的。
* ~' I( V; n# M- O你可以下载个有道词典,然后用selenium 写个自动化在桌面自动翻译完成入库。可以各种语言和软件之间倒腾几次。

点评

请问selenium操作有道词典是如何弄的? 有道词典也支持一篇文章这样的全文翻译么?谢谢。  详情 回复 发表于 2020-10-16 10:15
好的,谢谢,翻译的话反复考虑了很多方法都没法简单实现,只能来回多倒腾几次了。  详情 回复 发表于 2020-10-5 21:21
我是C罗!!!
回复 支持 反对

使用道具 举报

27

主题

1343

广告币

1933

积分

高级会员

Rank: 4

积分
1933

社区QQ达人

 楼主| 发表于 2020-10-5 21:21:58 | 显示全部楼层
我是c罗 发表于 2020-10-5 20:35
6 i/ Q# d- [2 }" y; l量大调用API根本不现实,不管是google还是其他引擎都是要钱的。9 x5 J) t4 w& q0 ~
你可以下载个有道词典,然后用selenium 写 ...

- J! R$ o' @- i: b# i- K好的,谢谢,翻译的话反复考虑了很多方法都没法简单实现,只能来回多倒腾几次了。
回复 支持 反对

使用道具 举报

55

主题

2626

广告币

2422

积分

论坛嘉宾

积分
2422

社区QQ达人

发表于 2020-10-15 15:08:22 | 显示全部楼层
不翻译,硬干。硬盘网络成本低于翻译API。- z" K1 M& h) t, e* ]+ F4 S
+ i7 X% I% N* o
7 }; x( A8 J7 x4 m& U

! _% U3 }% T0 a2 f6 x& D& I$ V1 N0 b5 \  r; D, j
- ~# h* Y( X4 W- f4 z! t3 T& M( e
7 J3 x7 _. X; C" e+ H
正好有个任务,目前index了2300万文章,采集了1000万成果。
( w) E7 b- F3 I2 N

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有账号?立即注册

x

点评

请问采集的源站是中文的还是英文的呀?  详情 回复 发表于 2020-10-18 12:08
牛人,, 还自己写了界面,,  详情 回复 发表于 2020-10-16 10:12
不愧为钱大大,用什么内容管理系统去承载这么大的数据量呢,另外简繁转换容易些,多语言就得用api了,现成的googletrans库也不靠谱。  详情 回复 发表于 2020-10-16 09:52
回复 支持 反对

使用道具 举报

27

主题

1343

广告币

1933

积分

高级会员

Rank: 4

积分
1933

社区QQ达人

 楼主| 发表于 2020-10-16 09:52:25 | 显示全部楼层
大洲 发表于 2020-10-15 15:08- F  A2 w8 h  E5 H
不翻译,硬干。硬盘网络成本低于翻译API。
) X- N5 x- g5 @2 F* M2 v: I% Y
不愧为钱大大,用什么内容管理系统去承载这么大的数据量呢,另外简繁转换容易些,多语言就得用api了,现成的googletrans库也不靠谱。

点评

CMS也是自写。MR9.AS 。 单机独服单域名亿数据能扛得住。  详情 回复 发表于 2020-10-16 16:38
回复 支持 反对

使用道具 举报

50

主题

390

广告币

745

积分

中级会员

Rank: 3Rank: 3

积分
745

社区QQ达人

发表于 2020-10-16 10:12:50 | 显示全部楼层
大洲 发表于 2020-10-15 15:08+ B3 ?: L  r( H0 X9 [$ Q
不翻译,硬干。硬盘网络成本低于翻译API。
; b6 J* B% h) p" r, Q# x
牛人,,
7 M9 u- Q" q0 q" \! i: E! C2 _9 x还自己写了界面,," X9 N0 f! _7 i

- A# d, m( p# W% _7 N: b
回复 支持 反对

使用道具 举报

50

主题

390

广告币

745

积分

中级会员

Rank: 3Rank: 3

积分
745

社区QQ达人

发表于 2020-10-16 10:15:29 | 显示全部楼层
我是c罗 发表于 2020-10-5 20:35  J% r: n# A" D2 c/ p1 c$ R
量大调用API根本不现实,不管是google还是其他引擎都是要钱的。7 h% i3 K. R2 N( O
你可以下载个有道词典,然后用selenium 写 ...
; K+ O& E0 U% ^9 q  |
请问selenium操作有道词典是如何弄的?4 @8 G2 R$ A9 W
2 G6 G6 X" n; T  w2 K6 u% n
  |9 D  ]1 X! h% U5 W4 n2 s
有道词典也支持一篇文章这样的全文翻译么?谢谢。
回复 支持 反对

使用道具 举报

55

主题

2626

广告币

2422

积分

论坛嘉宾

积分
2422

社区QQ达人

发表于 2020-10-16 16:38:14 | 显示全部楼层
gatsby 发表于 2020-10-16 09:52. S: i( T+ x0 {5 h% F# m
不愧为钱大大,用什么内容管理系统去承载这么大的数据量呢,另外简繁转换容易些,多语言就得用api了,现 ...
/ ~  g+ C% ]6 {9 @
CMS也是自写。MR9.AS 。  单机独服单域名亿数据能扛得住。  
回复 支持 反对

使用道具 举报

4

主题

325

广告币

533

积分

中级会员

Rank: 3Rank: 3

积分
533
发表于 2020-10-18 12:08:02 | 显示全部楼层
大洲 发表于 2020-10-15 15:085 h: r, v7 m& y6 X( c# ]
不翻译,硬干。硬盘网络成本低于翻译API。

8 `2 o- B5 ?. `1 N) b% p请问采集的源站是中文的还是英文的呀?
回复 支持 反对

使用道具 举报

21

主题

599

广告币

714

积分

中级会员

Rank: 3Rank: 3

积分
714

社区QQ达人

发表于 2020-10-19 16:38:01 | 显示全部楼层
先干,边走边换服务器
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关于我们|联系我们|DMCA|广告服务|小黑屋|手机版|Archiver|Github|网站地图|AdvertCN

GMT+8, 2024-11-5 18:51 , Processed in 0.063081 second(s), 20 queries , Gzip On, MemCache On.

Copyright © 2001-2023, AdvertCN

Proudly Operating in Hong Kong.

快速回复 返回顶部 返回列表