找回密码
 立即注册

QQ登录

只需一步,快速开始

PropellerAds
⚡️按条S5代理⚡️静态⚡️独享⚡️5GMediabuy⚡️玩家开户首选【鲁班跨境通-自助充值转账】FB/GG/TT❤️官方免费开户
Affiliate 全媒体流量资源⚡️Taboola/Outbrain /Bing⚡️一级代理开户投流-7*24h❤️人工在线【官方】❤️搜索套利买量投流开户
独立站⚡️开户投放Google FB TK游戏代投⚡️E.PN 虚拟卡⚡️BINOM TRACKER 60% OFF!
比Adplexity还好用的Spy工具ADPLEXITY + ADVERTCN7200W全球动态不重复住宅IP代理全球虚拟卡, 支持U充值
【15 年团队 - 广告自动化系统、定制开发】【ActionKey】Meta API 桥接令牌尤里改 - FB 稳定投放【神盾 AI】Meta 广告资产防护 永久免费
FB 三不限源头 - 自助下户充值转款各种主页、账单户、BM户(优势)IPCola原生住宅IP⚡️$1.8/条双ISPTK加白户/二解户/FB海外户/GG老户
最大欧洲Nutra网盟BA找量 FB高权重耐操个号⚡️稳定过审联盟收款/海外资金下发/服贸结汇✔Taboola海外户源头
全球效果广告投放平台|Vertoz IngeniousPlexSX.ORG 住宅IP | 凭码ADVERT3免费领3GB广告位出租 
楼主: gatsby

[讨论] 做大型多语言采集站哪种方案好些?

[复制链接]

27

主题

326

广告币

475

积分

中级会员

积分
475
发表于 2020-10-3 22:44:09 | 显示全部楼层
Influxtec
没接触过千万级内容的站,不过我估计,首先程序肯定得是自写的了,起码魔改,要不然很多地方都不合你的需求。其次对你整个流程的架构都是个考验,从硬件到软件,从采集到节点。8 x3 F* |& Z4 W9 Y& @9 r& n, o3 E

/ O/ @+ \' y; f8 ~8 b8 s; H! a0 g另外啊,其实国外内容站很不好做,你要知道google是面向全球,资讯站早已极大丰富,基本上什么内容都很完整且优秀,完全饱和了。光靠采集翻译什么的,九成九是没排名的,跟国内内容荒漠的网络环境完全不是一回事。所以论坛内大佬都跑CPS那些赚分成。

点评

确实是这样,对各方面都是个考验,就当时个学习的历程。人们收入下降消费欲望降低,cps同样也不好做。跟不上时代,处于逐渐被淘汰的边缘,做什么都不容易,难。  详情 回复 发表于 2020-10-3 23:22
Binom_AdvertCN
回复 支持 反对

使用道具 举报

27

主题

1395

广告币

1983

积分

高级会员

积分
1983

社区QQ达人

 楼主| 发表于 2020-10-3 23:22:21 | 显示全部楼层
buyabag 发表于 2020-10-3 22:44
( D  l* Z) g  j9 _2 O7 ]/ z没接触过千万级内容的站,不过我估计,首先程序肯定得是自写的了,起码魔改,要不然很多地方都不合你的需求 ...

* M5 |/ n5 N; X5 [# x确实是这样,对各方面都是个考验,就当时个学习的历程。人们收入下降消费欲望降低,cps同样也不好做。跟不上时代,处于逐渐被淘汰的边缘,做什么都不容易,难。
回复 支持 反对

使用道具 举报

6

主题

67

广告币

249

积分

初级会员

积分
249
发表于 2020-10-4 15:25:49 | 显示全部楼层
wordpress不要说千万级了,连50w就很困难了,特别是用lnmp

点评

正是准备使用lnmp搭建wordpress,这可如何是好  详情 回复 发表于 2020-10-4 21:24
✅✅✅英文SEO微博 https://weibo.com/1865108982
回复 支持 反对

使用道具 举报

27

主题

1395

广告币

1983

积分

高级会员

积分
1983

社区QQ达人

 楼主| 发表于 2020-10-4 21:24:24 | 显示全部楼层
比特人 发表于 2020-10-4 15:25* d' i4 L5 ~/ X1 }8 k
wordpress不要说千万级了,连50w就很困难了,特别是用lnmp

6 p9 l8 e3 t: q6 U* g- f+ Q正是准备使用lnmp搭建wordpress,这可如何是好

点评

别想那么远,干了再说,说不定你几万数据时候就已经放弃这个站了  详情 回复 发表于 2020-10-4 22:31
回复 支持 反对

使用道具 举报

19

主题

1123

广告币

2035

积分

高级会员

积分
2035

社区QQ达人

QQ
发表于 2020-10-4 22:31:08 | 显示全部楼层
gatsby 发表于 2020-10-4 21:24) L. R( d" W3 ~$ d" k+ |4 h9 v; S; z
正是准备使用lnmp搭建wordpress,这可如何是好

- H5 d/ e2 f/ m1 E2 S别想那么远,干了再说,说不定你几万数据时候就已经放弃这个站了

点评

不错,干了再说  详情 回复 发表于 2020-10-4 22:56
努力奋斗
回复 支持 1 反对 0

使用道具 举报

27

主题

1395

广告币

1983

积分

高级会员

积分
1983

社区QQ达人

 楼主| 发表于 2020-10-4 22:56:07 | 显示全部楼层
laoyebin 发表于 2020-10-4 22:31: y( z" D  W8 A& ^5 _7 ~' {8 ^. d
别想那么远,干了再说,说不定你几万数据时候就已经放弃这个站了

* f& R$ a" y8 W$ E9 g4 H不错,干了再说
回复 支持 反对

使用道具 举报

53

主题

807

广告币

1469

积分

高级会员

积分
1469

社区QQ达人

发表于 2020-10-5 20:35:11 | 显示全部楼层
量大调用API根本不现实,不管是google还是其他引擎都是要钱的。- M" U/ y6 _  D# D- u
你可以下载个有道词典,然后用selenium 写个自动化在桌面自动翻译完成入库。可以各种语言和软件之间倒腾几次。

点评

请问selenium操作有道词典是如何弄的? 有道词典也支持一篇文章这样的全文翻译么?谢谢。  详情 回复 发表于 2020-10-16 10:15
好的,谢谢,翻译的话反复考虑了很多方法都没法简单实现,只能来回多倒腾几次了。  详情 回复 发表于 2020-10-5 21:21
我是C罗!!!
回复 支持 反对

使用道具 举报

27

主题

1395

广告币

1983

积分

高级会员

积分
1983

社区QQ达人

 楼主| 发表于 2020-10-5 21:21:58 | 显示全部楼层
我是c罗 发表于 2020-10-5 20:35
/ M4 b2 H8 A% B' b+ f2 w. _量大调用API根本不现实,不管是google还是其他引擎都是要钱的。
. g( t  G; q# K; q4 O- I& j) ~你可以下载个有道词典,然后用selenium 写 ...
$ a/ }0 i: X% \% W  W, x0 R
好的,谢谢,翻译的话反复考虑了很多方法都没法简单实现,只能来回多倒腾几次了。
回复 支持 反对

使用道具 举报

55

主题

2630

广告币

2425

积分

论坛嘉宾

积分
2425

社区QQ达人

发表于 2020-10-15 15:08:22 | 显示全部楼层
不翻译,硬干。硬盘网络成本低于翻译API。
5 v. b4 ^, W2 {8 X) h3 h5 q7 z/ M0 j; q. S) s  _
) l1 j" m; T; D: X# q( G+ r$ b

  f% v# g1 A$ D5 ^% b5 c
( S3 F1 A; S& p! m3 `# j. W7 T3 r) ]/ N
) x) a+ y. s2 W- M
正好有个任务,目前index了2300万文章,采集了1000万成果。6 y" r, M/ ^5 ]) T+ }

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有账号?立即注册

×

点评

请问采集的源站是中文的还是英文的呀?  详情 回复 发表于 2020-10-18 12:08
牛人,, 还自己写了界面,,  详情 回复 发表于 2020-10-16 10:12
不愧为钱大大,用什么内容管理系统去承载这么大的数据量呢,另外简繁转换容易些,多语言就得用api了,现成的googletrans库也不靠谱。  详情 回复 发表于 2020-10-16 09:52
回复 支持 反对

使用道具 举报

27

主题

1395

广告币

1983

积分

高级会员

积分
1983

社区QQ达人

 楼主| 发表于 2020-10-16 09:52:25 | 显示全部楼层
大洲 发表于 2020-10-15 15:08) a7 J- H; X. A6 w  I7 s3 r
不翻译,硬干。硬盘网络成本低于翻译API。
. w! f6 F! ~- R9 P! h4 V6 ?: e
不愧为钱大大,用什么内容管理系统去承载这么大的数据量呢,另外简繁转换容易些,多语言就得用api了,现成的googletrans库也不靠谱。

点评

CMS也是自写。MR9.AS 。 单机独服单域名亿数据能扛得住。  详情 回复 发表于 2020-10-16 16:38
回复 支持 反对

使用道具 举报

52

主题

577

广告币

920

积分

中级会员

积分
920

社区QQ达人

发表于 2020-10-16 10:12:50 | 显示全部楼层
大洲 发表于 2020-10-15 15:08) o1 C+ {. S7 Z- R4 O* n
不翻译,硬干。硬盘网络成本低于翻译API。

! F# ]% o" ?" ?; `8 v4 X% O6 Z/ e牛人,,  d$ `. Q$ \0 D
还自己写了界面,,
& B/ Z) [. a8 u& Q1 i# J
, d# V+ v7 ~1 b/ D
回复 支持 反对

使用道具 举报

52

主题

577

广告币

920

积分

中级会员

积分
920

社区QQ达人

发表于 2020-10-16 10:15:29 | 显示全部楼层
我是c罗 发表于 2020-10-5 20:359 k% q7 E; a7 b: Q  |- r
量大调用API根本不现实,不管是google还是其他引擎都是要钱的。
2 C$ ]% N; a3 E1 I/ M# V你可以下载个有道词典,然后用selenium 写 ...
% Z! i3 `- a+ S9 J  I
请问selenium操作有道词典是如何弄的?5 m; h4 H. i( W  @3 N) o
+ Q# z" p" |! c* D1 Y% Y
: f4 m! G) z. e
有道词典也支持一篇文章这样的全文翻译么?谢谢。
回复 支持 反对

使用道具 举报

55

主题

2630

广告币

2425

积分

论坛嘉宾

积分
2425

社区QQ达人

发表于 2020-10-16 16:38:14 | 显示全部楼层
gatsby 发表于 2020-10-16 09:52
& ~3 n; U6 k% ^" z5 u不愧为钱大大,用什么内容管理系统去承载这么大的数据量呢,另外简繁转换容易些,多语言就得用api了,现 ...

1 y, A4 q- i! f4 k, ]+ O& J3 TCMS也是自写。MR9.AS 。  单机独服单域名亿数据能扛得住。  
回复 支持 反对

使用道具 举报

4

主题

325

广告币

533

积分

中级会员

积分
533
发表于 2020-10-18 12:08:02 | 显示全部楼层
大洲 发表于 2020-10-15 15:08
% e4 i6 l0 Z3 }  _  \$ S不翻译,硬干。硬盘网络成本低于翻译API。
1 }5 X: i6 u% g- O0 i
请问采集的源站是中文的还是英文的呀?
回复 支持 反对

使用道具 举报

21

主题

599

广告币

714

积分

中级会员

积分
714

社区QQ达人

发表于 2020-10-19 16:38:01 | 显示全部楼层
先干,边走边换服务器
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关于我们|联系我们|DMCA|广告服务|小黑屋|手机版|Archiver|Github|网站地图|AdvertCN

GMT+8, 2026-11-20 14:57 , Processed in 0.103595 second(s), 27 queries , Gzip On.

Copyright © 2001-2026, AdvertCN

Proudly Operating in Hong Kong.

快速回复 返回顶部 返回列表