各位大神，爬国外数据的话，标配是什么吗？

dengwen168

最近在学习python.,
! u2 ~$ }' `+ ^" b5 [7 l
. c, z  w4 w9 D6 s! j3 T3 z" j想请问一下各位大神，爬国外数据的话，
google ,twitter这些都是被墙的，

6 d; O4 Z0 v- i" R如果要爬这引起网站的话，标配是什么啊？

大家都是如何来解决这个问题的？
: H4 W" \. A; t- i3 J7 }0 O: l
我目前是浏览器可以FQ，可是爬虫翻不了，

是不是要搞个可以FQ的路由器啊？
" B& d1 q7 S+ A7 _* S1 \! e
谢谢。。
4 ?8 V  D! ]: f( b
: d; V4 M' U0 w  P- ]

qingwei

买个服务器

osun

搞vps，在vps上爬

osun

搞个vps，在vps上爬，练手的话就先国内网站爬爬

bluescharp

服务器不重要，大量的代理才是标配

lmxml

证明你还不会爬虫，没有什么标配的。学会用框架来玩爬虫。代理的话神招就是VPS加TOR

affiliateberry

话说专业的都用住宅代理crawling, 数据中心的IP很容易被Ban的...
不过价格不便宜
. I7 I. c. b( Z$ Yhttps://www.stupidproxy.com/5-best-residential-proxies/
6 `, Y/ A2 T! h8 @' N. ~) b+ G你问的是标配？ 把你的项目大小确定了，才来问标配.

fatiery

代理 大量