找回密码
 立即注册

QQ登录

只需一步,快速开始

PropellerAds
⚡️按条S5代理⚡️静态⚡️独享⚡️5GMediabuy⚡️玩家开户首选【鲁班跨境通-自助充值转账】FB/GG/TT❤️官方免费开户
Affiliate 全媒体流量资源⚡️Taboola/Outbrain /Bing⚡️一级代理开户投流-7*24h❤️人工在线【官方】❤️搜索套利买量投流开户
独立站⚡️开户投放Google FB TK游戏代投⚡️E.PN 虚拟卡⚡️BINOM TRACKER 60% OFF!
比Adplexity还好用的Spy工具ADPLEXITY + ADVERTCN7200W全球动态不重复住宅IP代理全球虚拟卡, 支持U充值
【15 年团队 - 广告自动化系统、定制开发】【ActionKey】Meta API 桥接令牌尤里改 - FB 稳定投放【神盾 AI】Meta 广告资产防护 永久免费
FB 三不限源头 - 自助下户充值转款各种主页、账单户、BM户(优势)IPCola原生住宅IP⚡️$1.8/条双ISPTK加白户/二解户/FB海外户/GG老户
最大欧洲Nutra网盟BA找量 FB高权重耐操个号⚡️稳定过审联盟收款/海外资金下发/服贸结汇✔Taboola海外户源头
全球效果广告投放平台|Vertoz IngeniousPlexSX.ORG 住宅IP | 凭码ADVERT3免费领3GB广告位出租 
楼主: gatsby

[讨论] 做大型多语言采集站哪种方案好些?

[复制链接]

27

主题

326

广告币

475

积分

中级会员

积分
475
发表于 2020-10-3 22:44:09 | 显示全部楼层
没接触过千万级内容的站,不过我估计,首先程序肯定得是自写的了,起码魔改,要不然很多地方都不合你的需求。其次对你整个流程的架构都是个考验,从硬件到软件,从采集到节点。
2 r  r4 e- R6 D% {! S4 e
0 d+ f. B5 Z; _$ E; C3 D另外啊,其实国外内容站很不好做,你要知道google是面向全球,资讯站早已极大丰富,基本上什么内容都很完整且优秀,完全饱和了。光靠采集翻译什么的,九成九是没排名的,跟国内内容荒漠的网络环境完全不是一回事。所以论坛内大佬都跑CPS那些赚分成。

点评

确实是这样,对各方面都是个考验,就当时个学习的历程。人们收入下降消费欲望降低,cps同样也不好做。跟不上时代,处于逐渐被淘汰的边缘,做什么都不容易,难。  详情 回复 发表于 2020-10-3 23:22
Binom_AdvertCN
回复 支持 反对

使用道具 举报

27

主题

1395

广告币

1983

积分

高级会员

积分
1983

社区QQ达人

 楼主| 发表于 2020-10-3 23:22:21 | 显示全部楼层
buyabag 发表于 2020-10-3 22:44
6 r$ y) x% t7 K4 f没接触过千万级内容的站,不过我估计,首先程序肯定得是自写的了,起码魔改,要不然很多地方都不合你的需求 ...

6 K5 a! c: C1 T' _8 T& h确实是这样,对各方面都是个考验,就当时个学习的历程。人们收入下降消费欲望降低,cps同样也不好做。跟不上时代,处于逐渐被淘汰的边缘,做什么都不容易,难。
回复 支持 反对

使用道具 举报

6

主题

67

广告币

249

积分

初级会员

积分
249
发表于 2020-10-4 15:25:49 | 显示全部楼层
wordpress不要说千万级了,连50w就很困难了,特别是用lnmp

点评

正是准备使用lnmp搭建wordpress,这可如何是好  详情 回复 发表于 2020-10-4 21:24
✅✅✅英文SEO微博 https://weibo.com/1865108982
回复 支持 反对

使用道具 举报

27

主题

1395

广告币

1983

积分

高级会员

积分
1983

社区QQ达人

 楼主| 发表于 2020-10-4 21:24:24 | 显示全部楼层
比特人 发表于 2020-10-4 15:25
. x* e% g0 K8 \3 E7 K; y* kwordpress不要说千万级了,连50w就很困难了,特别是用lnmp
& Q$ x4 L* d& U- g1 N
正是准备使用lnmp搭建wordpress,这可如何是好

点评

别想那么远,干了再说,说不定你几万数据时候就已经放弃这个站了  详情 回复 发表于 2020-10-4 22:31
回复 支持 反对

使用道具 举报

19

主题

1123

广告币

2035

积分

高级会员

积分
2035

社区QQ达人

QQ
发表于 2020-10-4 22:31:08 | 显示全部楼层
gatsby 发表于 2020-10-4 21:24
7 {+ J( q$ [" v$ {  Z% o正是准备使用lnmp搭建wordpress,这可如何是好
& Q. A2 F( r& B- q5 U! d
别想那么远,干了再说,说不定你几万数据时候就已经放弃这个站了

点评

不错,干了再说  详情 回复 发表于 2020-10-4 22:56
努力奋斗
回复 支持 1 反对 0

使用道具 举报

27

主题

1395

广告币

1983

积分

高级会员

积分
1983

社区QQ达人

 楼主| 发表于 2020-10-4 22:56:07 | 显示全部楼层
laoyebin 发表于 2020-10-4 22:31) e8 g& a% X0 Y2 @( ?: g
别想那么远,干了再说,说不定你几万数据时候就已经放弃这个站了

, P; q' p( K+ a9 G不错,干了再说
回复 支持 反对

使用道具 举报

53

主题

807

广告币

1469

积分

高级会员

积分
1469

社区QQ达人

发表于 2020-10-5 20:35:11 | 显示全部楼层
量大调用API根本不现实,不管是google还是其他引擎都是要钱的。
8 x  _3 J% k; r* a( ^你可以下载个有道词典,然后用selenium 写个自动化在桌面自动翻译完成入库。可以各种语言和软件之间倒腾几次。

点评

请问selenium操作有道词典是如何弄的? 有道词典也支持一篇文章这样的全文翻译么?谢谢。  详情 回复 发表于 2020-10-16 10:15
好的,谢谢,翻译的话反复考虑了很多方法都没法简单实现,只能来回多倒腾几次了。  详情 回复 发表于 2020-10-5 21:21
我是C罗!!!
回复 支持 反对

使用道具 举报

27

主题

1395

广告币

1983

积分

高级会员

积分
1983

社区QQ达人

 楼主| 发表于 2020-10-5 21:21:58 | 显示全部楼层
我是c罗 发表于 2020-10-5 20:35
  K7 E! f( m9 L+ I+ T5 _: H量大调用API根本不现实,不管是google还是其他引擎都是要钱的。9 r; U+ c+ O, v* z8 |
你可以下载个有道词典,然后用selenium 写 ...
/ v, D' {. M' y4 J$ O0 s; W
好的,谢谢,翻译的话反复考虑了很多方法都没法简单实现,只能来回多倒腾几次了。
回复 支持 反对

使用道具 举报

55

主题

2630

广告币

2425

积分

论坛嘉宾

积分
2425

社区QQ达人

发表于 2020-10-15 15:08:22 | 显示全部楼层
不翻译,硬干。硬盘网络成本低于翻译API。
7 i& t  `& V' |; m# p( t: t% o
: W; o6 \& E4 o

2 e. S7 O2 t" a3 B9 v, V# x, Q& b' @. y8 B6 R

- d- }3 V3 f' C# }
! S- f; ^+ B! b. t+ M5 C正好有个任务,目前index了2300万文章,采集了1000万成果。" P4 Z7 u* u' X+ d

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有账号?立即注册

×

点评

请问采集的源站是中文的还是英文的呀?  详情 回复 发表于 2020-10-18 12:08
牛人,, 还自己写了界面,,  详情 回复 发表于 2020-10-16 10:12
不愧为钱大大,用什么内容管理系统去承载这么大的数据量呢,另外简繁转换容易些,多语言就得用api了,现成的googletrans库也不靠谱。  详情 回复 发表于 2020-10-16 09:52
回复 支持 反对

使用道具 举报

27

主题

1395

广告币

1983

积分

高级会员

积分
1983

社区QQ达人

 楼主| 发表于 2020-10-16 09:52:25 | 显示全部楼层
大洲 发表于 2020-10-15 15:08! j, O2 r" K' p0 ~
不翻译,硬干。硬盘网络成本低于翻译API。
: |3 [' ^7 b) x) G0 O: |$ D
不愧为钱大大,用什么内容管理系统去承载这么大的数据量呢,另外简繁转换容易些,多语言就得用api了,现成的googletrans库也不靠谱。

点评

CMS也是自写。MR9.AS 。 单机独服单域名亿数据能扛得住。  详情 回复 发表于 2020-10-16 16:38
回复 支持 反对

使用道具 举报

52

主题

577

广告币

920

积分

中级会员

积分
920

社区QQ达人

发表于 2020-10-16 10:12:50 | 显示全部楼层
大洲 发表于 2020-10-15 15:08
% W( W/ A4 ^" H1 c/ Z) |# R, {不翻译,硬干。硬盘网络成本低于翻译API。

  ?0 m& T, ?8 V: }% p7 P牛人,,% @4 C4 m! m! o+ |+ h- U
还自己写了界面,,) \% V. n, G, V4 P
, c4 z3 z9 I/ j/ S: |8 H
回复 支持 反对

使用道具 举报

52

主题

577

广告币

920

积分

中级会员

积分
920

社区QQ达人

发表于 2020-10-16 10:15:29 | 显示全部楼层
我是c罗 发表于 2020-10-5 20:358 H. g* I5 S7 U; f( L8 v/ [
量大调用API根本不现实,不管是google还是其他引擎都是要钱的。* E" X* {4 V2 ^5 U# t
你可以下载个有道词典,然后用selenium 写 ...

! V9 `- Z- u# X请问selenium操作有道词典是如何弄的?
* b9 a/ i* w7 g, Z/ k
; W& \0 H9 e0 l* r* B/ O. z, e
8 T. E  w$ u" Q) U' J1 I3 `有道词典也支持一篇文章这样的全文翻译么?谢谢。
回复 支持 反对

使用道具 举报

55

主题

2630

广告币

2425

积分

论坛嘉宾

积分
2425

社区QQ达人

发表于 2020-10-16 16:38:14 | 显示全部楼层
gatsby 发表于 2020-10-16 09:52
. z4 w9 X) i; e+ G, d4 S不愧为钱大大,用什么内容管理系统去承载这么大的数据量呢,另外简繁转换容易些,多语言就得用api了,现 ...
- \( G3 v4 \7 T/ N, q2 g* v
CMS也是自写。MR9.AS 。  单机独服单域名亿数据能扛得住。  
回复 支持 反对

使用道具 举报

4

主题

325

广告币

533

积分

中级会员

积分
533
发表于 2020-10-18 12:08:02 | 显示全部楼层
大洲 发表于 2020-10-15 15:08
) k* x2 C8 u! O) Z7 c2 d不翻译,硬干。硬盘网络成本低于翻译API。

$ k) I, `) s! R  }- T请问采集的源站是中文的还是英文的呀?
回复 支持 反对

使用道具 举报

21

主题

599

广告币

714

积分

中级会员

积分
714

社区QQ达人

发表于 2020-10-19 16:38:01 | 显示全部楼层
先干,边走边换服务器
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关于我们|联系我们|DMCA|广告服务|小黑屋|手机版|Archiver|Github|网站地图|AdvertCN

GMT+8, 2026-11-20 15:06 , Processed in 0.085379 second(s), 22 queries , Gzip On.

Copyright © 2001-2026, AdvertCN

Proudly Operating in Hong Kong.

快速回复 返回顶部 返回列表