只需一步,快速开始
9
81
236
初级会员
使用道具 举报
6
123
248
cpoook 发表于 2013-6-4 16:30 * {2 e) _# P( _6 X" s3 H8 k# [1 O [是一个关键词,提取目标网页的10W个URL?
13
303
569
中级会员
12
32
164
2
46
173
yoo 发表于 2013-6-4 13:30 - m. \; q( K: g, z/ _我以前曾经编过一个程序,从Google的搜索结果里提取网址。 % I. N, Q9 N7 B9 G# W, t因为GG搜索结果有着一定的规律,这些URL在包含在 ...
8
67
215
5
10
75
54
6010
禁止访问
loquat 发表于 2013-6-5 12:28 7 E9 G7 ]* r( a% x2 ~scrapebox 单线程, 多线程就会触发验证码了
阿百川 发表于 2013-6-5 15:37 1 }9 [: O4 P s% x8 |sb多线程+代理,100w无压力
loquat 发表于 2013-6-5 21:08 - f% L9 t' j m$ }0 f5 i 兄弟,你用的是收费的代理吗? 搜刮的免费代理,一会儿就被封了。 另外一个关键词 应该搜索不到100W数据 ...
36
298
lhelhm 发表于 2013-6-4 13:26 1 E; M4 @! w" ?* i C' ~: [: zScrape Sonic * x+ g/ z+ k X; F GetFromGoogle 2 N3 ?$ e- n9 a; S" s2 W2 Q' {这些小软件都可以,下不到你也可以搜索谷歌搜刮工具,火狐有个插件好久不用也忘 ...
本版积分规则 发表回复 回帖后跳转到最后一页
使用QQ帐号登录论坛的用户
关于我们|联系我们|DMCA|广告服务|小黑屋|手机版|Archiver|Github|网站地图|AdvertCN
GMT+8, 2026-11-20 17:52 , Processed in 0.075014 second(s), 20 queries , Gzip On.
Copyright © 2001-2026, AdvertCN
Proudly Operating in Hong Kong.