dowall2 发表于 2016-5-12 12:13:24

bluescharp 发表于 2016-5-12 09:09
我之前用C#模拟浏览器去请求数据，间隔半分钟，但200个请求的时候就被验证码了。
然后验证码的频率越来越 ...

1 GOOGLE发回来的COOKIE你发回去没？
2 HTTP标头的 referer 你填了没？

用拦截网络数据的软件，查下浏览器发送了什么数据出去

爬虫要完全模拟一个真实的浏览器去浏览，而不是猛的发请求数据~~~

yuxue 发表于 2016-5-13 15:36:16

现在很多人采集亚马逊的数据，要怎么用起来呢？

asj 发表于 2016-5-17 01:16:40

lz的采集技术一流

54clz 发表于 2016-5-17 17:40:21

杰瑞 发表于 2016-5-12 09:43
用什么采集？

LZ肯定是自己写程序嘛

微商 发表于 2016-5-18 02:31:45

把数据分类起来，应该可以用。不过工作量挺大的

terminator 发表于 2016-6-14 13:41:25

欢迎一起研究，差不多的方向，给个联系方式吧
页: 1 2 [3]
查看完整版本: 采集了1KW的亚马逊数据，就是不懂怎么用