最近在学习python.,
* p) @5 x; W6 B* n% b% e' I1 ]4 }# e2 B
5 l+ |) j7 M0 C想请问一下各位大神,爬国外数据的话,
0 O! R$ F. c: f# ]google ,twitter这些都是被墙的,
2 x4 g6 ]) x. f3 `
2 Q* S9 j3 a+ ?9 v- |6 B, j- ^如果要爬这引起网站的话,标配是什么啊?
; D! b+ y" R. k6 k/ c$ K
/ V" U. a0 Y: _/ A4 w5 g& s9 f大家都是如何来解决这个问题的?( K* N' R4 }1 A8 e# }4 }
# I4 [5 a/ ~& b; i W5 N3 ]! r我目前是浏览器可以FQ,可是爬虫翻不了,
- B7 U0 E$ u* p1 c, ]' E3 U( ~# y/ P }' \
是不是要搞个可以FQ的路由器啊?
1 t* P; x3 I+ E3 |- ^( C" }+ x4 V" m
7 ^8 P1 B' }& k; g9 _谢谢。。
9 w$ \3 b: G: I" J* ?/ @0 D5 }
% j, s/ f( o' i2 @% d2 @6 a, ^) V5 i9 q( `" V5 x% c
|