请选择 进入手机版 | 继续访问电脑版
设为首页收藏本站English Version

AdvertCN - 广告中国

 找回密码
 立即注册

QQ登录

只需一步,快速开始

TopOffers
易赚网长期兑换paypal美元 值得信赖的顶级空间会员请立即修改密码ADPLEXITY + ADVERTCN
 诚聘FB投手(群814872384) 
东南亚COD物流
微信:13560706171
Affiliate专属spy工具欧美直客大刀Nutra广告位出租 
查看: 476|回复: 8

[闲聊] 各位大神,爬国外数据的话,标配是什么吗?

[复制链接]

28

主题

104

广告币

309

积分

初级会员

Rank: 2

积分
309

社区QQ达人

发表于 2019-4-7 17:23:55 | 显示全部楼层 |阅读模式
分享到:
最近在学习python.,( d6 u& Z3 u2 q! W
9 {  X$ X9 Q! O, v3 O
想请问一下各位大神,爬国外数据的话,. k& t1 d% v4 p" K) k
google ,twitter这些都是被墙的,& ]  K8 [% f, Q; R8 [1 ^9 k
7 u; O0 t9 W: X6 Q
如果要爬这引起网站的话,标配是什么啊?
. z8 |9 ~$ R6 m: p5 U
; Q% y8 a1 y& n# i* D+ Q大家都是如何来解决这个问题的?+ e: m+ ^' f& y& ~6 A

3 t4 `" r7 y* S4 B; Z我目前是浏览器可以FQ,可是爬虫翻不了,
/ s7 A4 W1 v8 R- b  o: B& _, l4 ^5 H& o$ ?, v/ D
是不是要搞个可以FQ的路由器啊?
0 v. l; @, \' f* j/ i
9 ~3 b" z1 I) m+ y" }0 g# w+ |7 c) n4 P谢谢。。
0 W% k; R. L; m
$ g) v* B: x; I( f# v, G5 f% `& h, V6 g" t+ v/ g; \* n% ]
相关帖子
Adcombo
回复

使用道具 举报

2

主题

3

广告币

208

积分

初级会员

Rank: 2

积分
208
发表于 2019-4-7 17:50:07 | 显示全部楼层
回复 支持 反对

使用道具 举报

2

主题

141

广告币

258

积分

初级会员

Rank: 2

积分
258
发表于 2019-4-8 06:45:47 | 显示全部楼层
搞vps,在vps上爬
回复 支持 反对

使用道具 举报

2

主题

141

广告币

258

积分

初级会员

Rank: 2

积分
258
发表于 2019-4-8 06:49:24 | 显示全部楼层
搞个vps,在vps上爬,练手的话就先国内网站爬爬
回复 支持 反对

使用道具 举报

38

主题

479

广告币

773

积分

中级会员

Rank: 3Rank: 3

积分
773

社区QQ达人

发表于 2019-4-8 08:52:02 | 显示全部楼层
服务器不重要,大量的代理才是标配
回复 支持 反对

使用道具 举报

3

主题

13

广告币

34

积分

初级会员

Rank: 2

积分
34

社区QQ达人

发表于 2019-4-11 12:21:34 | 显示全部楼层
证明你还不会爬虫,没有什么标配的。学会用框架来玩爬虫。代理的话神招就是VPS加TOR
回复 支持 反对

使用道具 举报

3

主题

-12

广告币

8

积分

新手上路

Rank: 1

积分
8

社区QQ达人

发表于 5 天前 | 显示全部楼层
本帖最后由 fatiery 于 2019-4-16 10:38 编辑 ) t, r: |2 L9 b
. g8 b& E# u& `0 {% i% z
本版块不允许发布广告,谢谢配合
回复 支持 反对

使用道具 举报

16

主题

31

广告币

372

积分

初级会员

Rank: 2

积分
372

社区QQ达人

发表于 5 天前 | 显示全部楼层
话说专业的都用住宅代理crawling, 数据中心的IP很容易被Ban的...
& w6 v; W  H) I1 z不过价格不便宜% q; ^0 j, p9 Z' S3 T+ J
https://www.stupidproxy.com/5-best-residential-proxies/+ j3 N8 s: V7 C: {7 J
你问的是标配? 把你的项目大小确定了,才来问标配.
笨鸟先飞.....
回复 支持 反对

使用道具 举报

66

主题

1334

广告币

1727

积分

版主

Rank: 7Rank: 7Rank: 7

积分
1727

社区QQ达人

QQ
发表于 4 天前 | 显示全部楼层
代理 大量
空静柔
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

idvert

QQ|Github|联系我们|广告服务|小黑屋|手机版|Archiver|AdvertCN ( 津ICP备17003502号-1|网站地图  

GMT+8, 2019-4-20 16:55 , Processed in 0.080283 second(s), 8 queries , Gzip On, Memcache On.

Powered by Discuz

© 2007-2016 AdvertCN.

快速回复 返回顶部 返回列表