AdvertCN - 广告中国

 找回密码
 立即注册

QQ登录

只需一步,快速开始

PropellerAds
 谷歌+Bing+TT+MSN官方代理 
⚡️按条S5代理⚡️静态⚡️独享⚡️5G需要代理IP?⚡️Proxysites.ai⚡️指纹浏览器,就用AdsPower
Mediabuy⚡️玩家开户首选【鲁班跨境通-自助充值转账】FB/GG/TT❤️官方免费开户Affiliate 全媒体流量资源⚡️
Taboola/Outbrain /Bing⚡️一级代理开户投流-7*24h❤️人工在线【官方】❤️搜索套利买量投流开户独立站⚡️开户投放
FB BM不限额,短id账单户E.PN 虚拟卡DuoPlus专注打造跨境电商云手机BINOM TRACKER 60% OFF!
比Adplexity还好用的Spy工具ADPLEXITY + ADVERTCN7200W全球动态不重复住宅IP代理虚拟信用卡+独立站收款
全球虚拟卡, 支持U充值Facebook 批量上广告尤里改 - FB 稳定投放免费黑五教程(持续更新、欢迎交流)
FB 三不限源头 - 自助下户充值转款各种主页、账单户、BM户(优势)⚡️个人户,bm户不限额,账单户9Proxy ⚡️ $0.04/IP, 无限带宽
IPCola原生住宅IP⚡️$2.1/条双ISPGoogle、Bing官方总代  联盟流量开户fb耐用号0.01一个fb账号官方合作商
FB资源,账单户,分享户,国内一手FB企业户BM户账单户源头PTM全球虚拟卡—进来交个朋友!PTM虚拟卡⚡️费率透明⚡️额度随心
广告位出租   
楼主: gatsby

[讨论] 做大型多语言采集站哪种方案好些?

[复制链接]

27

主题

324

广告币

473

积分

中级会员

Rank: 3Rank: 3

积分
473
发表于 2020-10-3 22:44:09 | 显示全部楼层
SimplyNode
没接触过千万级内容的站,不过我估计,首先程序肯定得是自写的了,起码魔改,要不然很多地方都不合你的需求。其次对你整个流程的架构都是个考验,从硬件到软件,从采集到节点。
- O5 p5 v3 @0 n* s0 N" m, Q5 T% g% H# P7 j
另外啊,其实国外内容站很不好做,你要知道google是面向全球,资讯站早已极大丰富,基本上什么内容都很完整且优秀,完全饱和了。光靠采集翻译什么的,九成九是没排名的,跟国内内容荒漠的网络环境完全不是一回事。所以论坛内大佬都跑CPS那些赚分成。

点评

确实是这样,对各方面都是个考验,就当时个学习的历程。人们收入下降消费欲望降低,cps同样也不好做。跟不上时代,处于逐渐被淘汰的边缘,做什么都不容易,难。  详情 回复 发表于 2020-10-3 23:22
回复 支持 反对

使用道具 举报

27

主题

1349

广告币

1939

积分

高级会员

Rank: 4

积分
1939

社区QQ达人

 楼主| 发表于 2020-10-3 23:22:21 | 显示全部楼层
buyabag 发表于 2020-10-3 22:445 a% V9 k/ _# Y& Z7 ~
没接触过千万级内容的站,不过我估计,首先程序肯定得是自写的了,起码魔改,要不然很多地方都不合你的需求 ...
) {& t1 i) B' \2 h2 D. r. D
确实是这样,对各方面都是个考验,就当时个学习的历程。人们收入下降消费欲望降低,cps同样也不好做。跟不上时代,处于逐渐被淘汰的边缘,做什么都不容易,难。
回复 支持 反对

使用道具 举报

6

主题

67

广告币

249

积分

初级会员

Rank: 2

积分
249
发表于 2020-10-4 15:25:49 | 显示全部楼层
wordpress不要说千万级了,连50w就很困难了,特别是用lnmp

点评

正是准备使用lnmp搭建wordpress,这可如何是好  详情 回复 发表于 2020-10-4 21:24
✅✅✅英文SEO微博 https://weibo.com/1865108982
回复 支持 反对

使用道具 举报

27

主题

1349

广告币

1939

积分

高级会员

Rank: 4

积分
1939

社区QQ达人

 楼主| 发表于 2020-10-4 21:24:24 | 显示全部楼层
比特人 发表于 2020-10-4 15:257 a  r2 P) J' s, {' p; U
wordpress不要说千万级了,连50w就很困难了,特别是用lnmp
. _, N+ v! k  \2 J; s
正是准备使用lnmp搭建wordpress,这可如何是好

点评

别想那么远,干了再说,说不定你几万数据时候就已经放弃这个站了  详情 回复 发表于 2020-10-4 22:31
回复 支持 反对

使用道具 举报

19

主题

1103

广告币

2016

积分

高级会员

Rank: 4

积分
2016

社区QQ达人

QQ
发表于 2020-10-4 22:31:08 | 显示全部楼层
gatsby 发表于 2020-10-4 21:24
: k8 ?+ p8 [# D# d* m0 l# E9 C正是准备使用lnmp搭建wordpress,这可如何是好

7 ~" ]4 \& B  u2 J别想那么远,干了再说,说不定你几万数据时候就已经放弃这个站了

点评

不错,干了再说  详情 回复 发表于 2020-10-4 22:56
努力奋斗
回复 支持 1 反对 0

使用道具 举报

27

主题

1349

广告币

1939

积分

高级会员

Rank: 4

积分
1939

社区QQ达人

 楼主| 发表于 2020-10-4 22:56:07 | 显示全部楼层
laoyebin 发表于 2020-10-4 22:31
, u4 T4 ?- p/ T4 W, P6 g- m/ `别想那么远,干了再说,说不定你几万数据时候就已经放弃这个站了
4 R" Q. G$ G8 Y% y2 a
不错,干了再说
回复 支持 反对

使用道具 举报

52

主题

752

广告币

1414

积分

高级会员

Rank: 4

积分
1414

社区QQ达人

发表于 2020-10-5 20:35:11 | 显示全部楼层
量大调用API根本不现实,不管是google还是其他引擎都是要钱的。
6 ^' P' M* U# z1 k2 F你可以下载个有道词典,然后用selenium 写个自动化在桌面自动翻译完成入库。可以各种语言和软件之间倒腾几次。

点评

请问selenium操作有道词典是如何弄的? 有道词典也支持一篇文章这样的全文翻译么?谢谢。  详情 回复 发表于 2020-10-16 10:15
好的,谢谢,翻译的话反复考虑了很多方法都没法简单实现,只能来回多倒腾几次了。  详情 回复 发表于 2020-10-5 21:21
我是C罗!!!
回复 支持 反对

使用道具 举报

27

主题

1349

广告币

1939

积分

高级会员

Rank: 4

积分
1939

社区QQ达人

 楼主| 发表于 2020-10-5 21:21:58 | 显示全部楼层
我是c罗 发表于 2020-10-5 20:358 V% i) u) E0 L1 v! ?9 K. c! |
量大调用API根本不现实,不管是google还是其他引擎都是要钱的。$ X4 l7 m2 O" I: V' r9 s9 t
你可以下载个有道词典,然后用selenium 写 ...
' }" f9 T; ^. L2 D. ]8 I! Z
好的,谢谢,翻译的话反复考虑了很多方法都没法简单实现,只能来回多倒腾几次了。
回复 支持 反对

使用道具 举报

55

主题

2628

广告币

2424

积分

论坛嘉宾

积分
2424

社区QQ达人

发表于 2020-10-15 15:08:22 | 显示全部楼层
不翻译,硬干。硬盘网络成本低于翻译API。
! _7 q: `# W; l2 b+ }0 f; Y/ B5 @  M0 E! B
: B, r* ^, @' `2 Y, D6 A6 x5 a
  e! ]1 A9 x# o  h, c5 _7 b# K

4 Y) ~# p$ v1 ~( k8 B8 Z7 x. c5 E. Z  z6 w' T' p0 }1 W

5 S0 M2 N4 M9 a, h2 ~+ e" Q9 G+ ]正好有个任务,目前index了2300万文章,采集了1000万成果。
2 }1 N. A4 _5 y3 c: F$ p

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有账号?立即注册

x

点评

请问采集的源站是中文的还是英文的呀?  详情 回复 发表于 2020-10-18 12:08
牛人,, 还自己写了界面,,  详情 回复 发表于 2020-10-16 10:12
不愧为钱大大,用什么内容管理系统去承载这么大的数据量呢,另外简繁转换容易些,多语言就得用api了,现成的googletrans库也不靠谱。  详情 回复 发表于 2020-10-16 09:52
回复 支持 反对

使用道具 举报

27

主题

1349

广告币

1939

积分

高级会员

Rank: 4

积分
1939

社区QQ达人

 楼主| 发表于 2020-10-16 09:52:25 | 显示全部楼层
大洲 发表于 2020-10-15 15:08
, a' e5 f  Q$ P. t, [( S5 `不翻译,硬干。硬盘网络成本低于翻译API。
8 o0 ^* o- d: J2 v! X$ E0 h8 a
不愧为钱大大,用什么内容管理系统去承载这么大的数据量呢,另外简繁转换容易些,多语言就得用api了,现成的googletrans库也不靠谱。

点评

CMS也是自写。MR9.AS 。 单机独服单域名亿数据能扛得住。  详情 回复 发表于 2020-10-16 16:38
回复 支持 反对

使用道具 举报

52

主题

550

广告币

893

积分

中级会员

Rank: 3Rank: 3

积分
893

社区QQ达人

发表于 2020-10-16 10:12:50 | 显示全部楼层
大洲 发表于 2020-10-15 15:08: g* y* ~2 p* s
不翻译,硬干。硬盘网络成本低于翻译API。
! a' Y$ i8 G/ Z8 _# e
牛人,,9 V1 \' i* }5 `/ C* _1 P) y0 o
还自己写了界面,,
6 T, x& m9 z7 B$ O1 B
5 B3 R8 Z2 m" W; O) ?
回复 支持 反对

使用道具 举报

52

主题

550

广告币

893

积分

中级会员

Rank: 3Rank: 3

积分
893

社区QQ达人

发表于 2020-10-16 10:15:29 | 显示全部楼层
我是c罗 发表于 2020-10-5 20:35, w/ Y9 h9 L6 t: C6 D: \' ?
量大调用API根本不现实,不管是google还是其他引擎都是要钱的。5 g9 J, Q  l+ I6 i1 i) q4 i
你可以下载个有道词典,然后用selenium 写 ...

& i2 Z1 H- D8 U- ^# u请问selenium操作有道词典是如何弄的?3 l+ ?0 X& y- {
9 \( c! D5 D8 {9 K1 N) `% h$ F
" n. N- L# ~+ r# G; {- P
有道词典也支持一篇文章这样的全文翻译么?谢谢。
回复 支持 反对

使用道具 举报

55

主题

2628

广告币

2424

积分

论坛嘉宾

积分
2424

社区QQ达人

发表于 2020-10-16 16:38:14 | 显示全部楼层
gatsby 发表于 2020-10-16 09:52, v% T' J- l! b5 X9 e) F% d; W% o
不愧为钱大大,用什么内容管理系统去承载这么大的数据量呢,另外简繁转换容易些,多语言就得用api了,现 ...
  R& y) F' A6 W8 t
CMS也是自写。MR9.AS 。  单机独服单域名亿数据能扛得住。  
回复 支持 反对

使用道具 举报

4

主题

325

广告币

533

积分

中级会员

Rank: 3Rank: 3

积分
533
发表于 2020-10-18 12:08:02 | 显示全部楼层
大洲 发表于 2020-10-15 15:08
% |+ y; @1 M3 ?. ~, t不翻译,硬干。硬盘网络成本低于翻译API。

0 }4 l& F. c1 P1 S8 B$ F/ V0 g: I, N6 ~请问采集的源站是中文的还是英文的呀?
回复 支持 反对

使用道具 举报

21

主题

599

广告币

714

积分

中级会员

Rank: 3Rank: 3

积分
714

社区QQ达人

发表于 2020-10-19 16:38:01 | 显示全部楼层
先干,边走边换服务器
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关于我们|联系我们|DMCA|广告服务|小黑屋|手机版|Archiver|Github|网站地图|AdvertCN

GMT+8, 2025-4-2 15:32 , Processed in 0.053329 second(s), 13 queries , Gzip On, MemCache On.

Copyright © 2001-2023, AdvertCN

Proudly Operating in Hong Kong.

快速回复 返回顶部 返回列表