采集成果展示

xu6882611

8 ]  g2 ?% s7 P5 Y6 O& A6 t! m/ \
0 ]  ]* F! M* e) z+ Z* _! d目前采集约5000篇文章，innodb存储引擎差不多占用100M。
页面级缓存基于数据库cache，O(1)复杂度性能尚可，主要矛盾1G内存redis玩儿不起！
litespeed页面级缓存在多语言情况下.htaccess配置及其复杂，在套用CF后即便走缓存也看不出响应时间有多少提升。
CF缓存免费版不支持自定义缓存KEY，功能有限只能放弃。

那些采集动不动上百万篇的都是狠人啊。
, s/ b9 }% e+ }$ M% J6 H6 c

河小马

1G内存？你的这台VM太拼命了
( c2 k  \  W7 n+ }7 Q$ u( |3 p

xu6882611

河小马 发表于 2022-12-19 18:54
0 b' g! W+ m8 T3 M1G内存？你的这台VM太拼命了

1 `. h) M4 ^, |: b# i9 ]# ]7 Z明年3月份看成果吧，势头好就迁移到vps上。

asj

我有个站5KW数据量了 死于上一次Google算法调整

xu6882611

asj 发表于 2022-12-19 20:38
8 _2 T) b$ e, ~1 E$ G2 Q: h$ _$ l  g我有个站5KW数据量了 死于上一次Google算法调整

0 p# F& ?% e* O1 ]MyISAM引擎占用不了多少存储，但是不支持事务处理。你这几千万数据量图片是咋处理的？日UV/PV多少？
6 {# a9 J% \& l
个人网站几千万数据量我要是是google官方也给你毙了。