只需一步,快速开始
23
160
317
初级会员
使用道具 举报
42
726
1031
中级会员
fei 发表于 2016-2-26 12:09- j6 c* J; s9 S* u( R5 ?0 T$ r: u shuf test.txt > output.txt
4
567
1010
quanchengxue 发表于 2016-3-28 09:114 Y4 E& ?6 {) S- E9 T+ K: S 你一篇文章需要多少行数据?我的情况是每篇100行,一共200M的txt,分割成了200个txt文件,文件名1.txt到200 ...
bluescharp 发表于 2016-3-28 15:292 n3 g P' D# T# I3 H 随机文章写入数据库吗?不然每次访问结果都不一样?7 ]- Y; u8 y2 k* r+ l 一共生产多少文章?我之前试过,不过不是直接句子的 ...
quanchengxue 发表于 2016-3-28 15:54 / X6 K/ @5 r5 D! ?9 R! g1 x& j不写数据库,直接生成缓存,或者直接生成HTML文件,缓存目录用两层,第一层用MD5的12位,第二层用34位, ...
bluescharp 发表于 2016-3-28 19:43 1 E! I: y( x8 v我之前也是用文件缓存。一方面是小文件太多,I/O效率低。另外一方面,删除起来不是一般的麻烦。 / l/ n) I) ]3 _% ]而且文件 ...
7
2
111
quanchengxue 发表于 2016-3-28 22:20 3 X( P& c3 J1 m% T7 O( A我的数据没你的那么多,最多的时候生成了200多W缓存,我自己的情况倒是没发现I/O效率低的情况,google爬 ...
0
3
禁止发言
本版积分规则 发表回复 回帖后跳转到最后一页
使用QQ帐号登录论坛的用户
关于我们|联系我们|DMCA|广告服务|小黑屋|手机版|Archiver|Github|网站地图|AdvertCN
GMT+8, 2026-11-20 14:42 , Processed in 0.074526 second(s), 20 queries , Gzip On.
Copyright © 2001-2026, AdvertCN
Proudly Operating in Hong Kong.