找回密码
 立即注册

QQ登录

只需一步,快速开始

PropellerAds
⚡️按条S5代理⚡️静态⚡️独享⚡️5GMediabuy⚡️玩家开户首选【鲁班跨境通-自助充值转账】FB/GG/TT❤️官方免费开户
Affiliate 全媒体流量资源⚡️Taboola/Outbrain /Bing⚡️一级代理开户投流-7*24h❤️人工在线【官方】❤️搜索套利买量投流开户
独立站⚡️开户投放Google FB TK游戏代投⚡️E.PN 虚拟卡⚡️BINOM TRACKER 60% OFF!
比Adplexity还好用的Spy工具ADPLEXITY + ADVERTCN7200W全球动态不重复住宅IP代理全球虚拟卡, 支持U充值
【15 年团队 - 广告自动化系统、定制开发】【ActionKey】Meta API 桥接令牌尤里改 - FB 稳定投放【神盾 AI】Meta 广告资产防护 永久免费
FB 三不限源头 - 自助下户充值转款各种主页、账单户、BM户(优势)IPCola原生住宅IP⚡️$1.8/条双ISPTK加白户/二解户/FB海外户/GG老户
最大欧洲Nutra网盟BA找量 FB高权重耐操个号⚡️稳定过审联盟收款/海外资金下发/服贸结汇✔Taboola海外户源头
全球效果广告投放平台|Vertoz IngeniousPlexSX.ORG 住宅IP | 凭码ADVERT3免费领3GB广告位出租 
楼主: 阿百川

[业界] 求采集ezinearticles的高招,封ip太狠了

[复制链接]

5

主题

16

广告币

89

积分

初级会员

积分
89
发表于 2013-11-26 21:02:39 | 显示全部楼层
可以修改 User Agent 为google的爬虫,它就不敢轻易的封你了
Binom_AdvertCN
回复 支持 反对

使用道具 举报

3

主题

56

广告币

184

积分

初级会员

积分
184

社区QQ达人

发表于 2013-11-26 21:14:39 | 显示全部楼层
阿百川 发表于 2013-11-26 20:54
% ]  B) Y8 P; W十几万,用gg缓存采的差不多了,本来想搞整站来着

3 }* v' ?, j' ?) o刚找到方法采,都差不多那算了
回复 支持 反对

使用道具 举报

54

主题

9

广告币

6010

积分

禁止访问

积分
6010
 楼主| 发表于 2013-11-27 07:33:40 | 显示全部楼层
微笑君 发表于 2013-11-26 21:02 0 |) U! S7 a3 B; |
可以修改 User Agent 为google的爬虫,它就不敢轻易的封你了

2 j! U' [: y1 p4 j各种爬虫、手机端的ua都试过,没用
回复 支持 反对

使用道具 举报

54

主题

9

广告币

6010

积分

禁止访问

积分
6010
 楼主| 发表于 2013-11-27 07:34:47 | 显示全部楼层
小俞 发表于 2013-11-26 21:14
" r4 V) y3 i0 r刚找到方法采,都差不多那算了
  I. W) J5 k4 M( P0 w
求方法,看看可不可以提高效率去扒整站
回复 支持 反对

使用道具 举报

SIR 该用户已被删除
发表于 2013-11-27 07:41:24 | 显示全部楼层
测试时间间隔撒,采集这个本来就是长期打算的,楼主太急了。不要一下子吃成胖子哈
回复 支持 反对

使用道具 举报

54

主题

9

广告币

6010

积分

禁止访问

积分
6010
 楼主| 发表于 2013-11-27 17:32:43 | 显示全部楼层
SIR 发表于 2013-11-27 07:41
$ Q$ V) M: E# E% g/ J% q测试时间间隔撒,采集这个本来就是长期打算的,楼主太急了。不要一下子吃成胖子哈 ...
4 s' F; @: {+ Y, ?
恩,看现在这批数据的处理结果如何,如果不错就慢慢采
回复 支持 反对

使用道具 举报

3

主题

3

广告币

14

积分

新手上路

积分
14
发表于 2013-12-8 17:31:42 | 显示全部楼层
我曾使用的办法+ k  C9 b4 ]& ?  n6 A/ @$ I
1、google  iP 代理,会找到一些提供免费代理ip网站/ M6 d# K! p0 J# j$ W  ?$ L
2、分别打开每个网站,复制ip和端口号到excell& t& ?4 @; W! {+ ~! i" u0 }) {) L4 C
3、调整excell,最终得到一个表只有一列,形如199.199.199.199:199,过程繁琐,不过熟练了也快* r8 U' q) S) [- o) S; G9 f
4、所有的ip和端口号用逗号隔开,保存到一个文本文件1 v$ R- H+ `/ r0 ]
5、php做一个程序,读取这个文本文件,按逗号保存到一个数组中,每次随机取出一个% T( v7 d: A. U. w# |; k4 X
6、php写一段采集代码,用取出的这个代理ip,用完以后从数组中删除这个ip,把整个数组再用逗号隔开,保存到同名文本文件8 t1 ]: f& H  }8 _
7、隔几天到那几个网站,复制新的代理ip
2 i+ q* i8 j3 h' ~, a$ t) d) U. ?8、重复以上步骤
回复 支持 反对

使用道具 举报

54

主题

9

广告币

6010

积分

禁止访问

积分
6010
 楼主| 发表于 2013-12-9 07:31:33 | 显示全部楼层
jk1s 发表于 2013-12-8 17:31 * d8 c2 n9 ~0 \, Q1 S
我曾使用的办法
! P' M9 ~. C; N( I1、google  iP 代理,会找到一些提供免费代理ip网站" r. E1 k! b) Y6 O6 R# E3 d
2、分别打开每个网站,复制ip和端口号 ...
# {4 s' T# T9 ~; O
也是采集的ez?多久之前?5 B, M' }: R$ a

6 i' C7 I( I+ G1 T尝试过使用代理,效率很差
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关于我们|联系我们|DMCA|广告服务|小黑屋|手机版|Archiver|Github|网站地图|AdvertCN

GMT+8, 2026-11-20 23:12 , Processed in 0.070461 second(s), 25 queries , Gzip On.

Copyright © 2001-2026, AdvertCN

Proudly Operating in Hong Kong.

快速回复 返回顶部 返回列表