求采集ezinearticles的高招，封ip太狠了

阿百川 · 发表于 2013-11-22 16:22:07

准备了十几个ip，采了不到300条就封完了

设置了采集间隔，短了没用，长了效率太低

求高人指点

小俞 · 发表于 2013-11-22 16:40:30

您或您的网络上有人正在运行一个机器人爬行我们的网站。
请与您的网络管理员联系，如果你相信这是的情况下。

我们只需要你输入验证码，所以我们可以确认，你是一个人，而不是一个机器人。

alitraffic · 发表于 2013-11-22 17:22:01

结合decaptcha不行吗？

阿百川 · 发表于 2013-11-22 17:37:56

alitraffic 发表于 2013-11-22 17:22 / t( X3 v* Y S1 @$ b0 E
结合decaptcha不行吗？

小试了下，烧的太厉害了

billy · 发表于 2013-11-22 18:24:10

试试直接从搜索引擎采集看看封不封。用site:ezinearticles.com，google一般采集的多会要求验证，采集bing可能更好点。或者试试google缓存页。

firearmer · 发表于 2013-11-22 18:59:11

根据目测，如果有一些美国ip，然后打开每一篇文章都切换一下ip，间隔稍微长一些，那么应该没啥问题。

阿百川 · 发表于 2013-11-22 19:33:53

billy 发表于 2013-11-22 18:24 ; I+ J7 o# ~% G. J6 |7 c
试试直接从搜索引擎采集看看封不封。用site:ezinearticles.com，google一般采集的多会要求验证，采集bing可 ...

bing的缓存页url搞不定，gg的缓存还可以，勉强能有龟速

阿百川 · 发表于 2013-11-22 19:34:39

firearmer 发表于 2013-11-22 18:59
4 Y# v1 \* b3 A. A. ?( b% h; O* `根据目测，如果有一些美国ip，然后打开每一篇文章都切换一下ip，间隔稍微长一些，那么应该没啥问题。 ...

根据实测，间隔短无效，间隔长效率太低

Atrus · 发表于 2013-11-22 19:37:09

以前挂多个代理IP 间隔还可以采现在不行了
AS似乎是API调用的具体不清楚

阿百川 · 发表于 2013-11-22 19:57:51

Atrus 发表于 2013-11-22 19:37 ' a% [5 ]8 ?. E$ j* Y- s" c. ~
以前挂多个代理IP 间隔还可以采现在不行了) y; t6 W3 J( E+ v# b
AS似乎是API调用的具体不清楚

以前一天采几十万很容易，后悔当初没扒光

ofneyyooa · 发表于 2013-11-22 23:54:51

你用多少个代理ip啊，　现在哪个卖代理的不是几千上万的啊.
我还真没遇过采集不到的.

Atrus · 发表于 2013-11-23 00:45:12

ofneyyooa 发表于 2013-11-22 23:54 & n3 t+ u! q; T# F# X
你用多少个代理ip啊，　现在哪个卖代理的不是几千上万的啊.
2 Y" T3 T1 i. E9 {9 m我还真没遇过采集不到的.2 ]1 w3 ~' T, }, H$ D
...

你试试就知道有可能1个代理IP 只能采一篇。。。

阿百川 · 发表于 2013-11-23 07:41:09

ofneyyooa 发表于 2013-11-22 23:54 . @* ~% L" _! p) ?' a4 Q# T1 r3 b
你用多少个代理ip啊，　现在哪个卖代理的不是几千上万的啊., p& {; s3 E w
我还真没遇过采集不到的.: g, I) ?1 D% K" p: ^
...

开始也是这么想的，实际操作。。。

阿百川 · 发表于 2013-11-23 07:43:16

Atrus 发表于 2013-11-23 00:45 4 r. i6 M( O! H( |# u8 P8 n
你试试就知道有可能1个代理IP 只能采一篇。。。

目前采集gg缓存，效率勉强可以，一小时一千多条

小俞 · 发表于 2013-11-23 17:11:57

本帖最后由小俞于 2013-11-23 17:27 编辑

为什么我可以随便采了。。。

		自动登录	找回密码
密码			立即注册

[业界] 求采集ezinearticles的高招，封ip太狠了