采集成果展示

xu6882611

/ W2 M7 l5 l$ E+ i* h目前采集约5000篇文章，innodb存储引擎差不多占用100M。
页面级缓存基于数据库cache，O(1)复杂度性能尚可，主要矛盾1G内存redis玩儿不起！
litespeed页面级缓存在多语言情况下.htaccess配置及其复杂，在套用CF后即便走缓存也看不出响应时间有多少提升。
CF缓存免费版不支持自定义缓存KEY，功能有限只能放弃。
9 C% K+ z0 Y% X! k% Z5 X: \
! ?; B2 p, s( q2 S  m+ Q那些采集动不动上百万篇的都是狠人啊。
3 Z' K" V' m/ i/ v4 T! E6 C3 x
- S* m3 W) Y: ?' @

河小马

1G内存？你的这台VM太拼命了
2 H+ |& }( E9 e: b
/ t: S0 h1 m8 b% j1 P

xu6882611

河小马 发表于 2022-12-19 18:54
1G内存？你的这台VM太拼命了

( q$ ^# S- C. m. P8 L: @明年3月份看成果吧，势头好就迁移到vps上。

asj

我有个站5KW数据量了 死于上一次Google算法调整

xu6882611

asj 发表于 2022-12-19 20:38
我有个站5KW数据量了 死于上一次Google算法调整

% K, N( s- K2 BMyISAM引擎占用不了多少存储，但是不支持事务处理。你这几千万数据量图片是咋处理的？日UV/PV多少？
" n  N. \# q" g  c' v' {2 K
1 @! u7 |. e# _) G* j+ T- t个人网站几千万数据量我要是是google官方也给你毙了。