采集了1KW的亚马逊数据，就是不懂怎么用

dowall2

bluescharp 发表于 2016-5-12 09:09
+ Q% L: W* w! }+ _$ ]; k9 R我之前用C#模拟浏览器去请求数据，间隔半分钟，但200个请求的时候就被验证码了。
然后验证码的频率越来越 ...

: g) E+ p7 f' ]6 g7 _' `1 GOOGLE发回来的COOKIE你发回去没？
6 O) p( x. [8 F+ E! {/ Z  ?2 HTTP标头的 referer 你填了没？
5 H; J. B8 q$ k9 {# E* |7 F6 M
0 N3 ]2 ^# [' o用拦截网络数据的软件，查下浏览器发送了什么数据出去

爬虫要完全模拟一个真实的浏览器去浏览，而不是猛的发请求数据~~~

yuxue

现在很多人采集亚马逊的数据，要怎么用起来呢？

asj

lz的采集技术一流

54clz

杰瑞 发表于 2016-5-12 09:43
用什么采集？

! X8 j* J$ |+ E; k, D: O0 P8 iLZ肯定是自己写程序嘛

微商

把数据分类起来，应该可以用。不过工作量挺大的

terminator

欢迎一起研究，差不多的方向，给个联系方式吧