AdvertCN - 广告中国

 找回密码
 立即注册

QQ登录

只需一步,快速开始

Adsterra China
 谷歌+Bing+TT+MSN官方代理 
⚡️按条S5代理⚡️静态⚡️独享⚡️5G皇家代理IP⚡️#1性价比⚡️⚡️AdsPower:安全不封号,高效自动化
Mediabuy⚡️玩家开户首选【鲁班跨境通-自助充值转账】FB/GG/TT❤️官方免费开户Affiliate 全媒体流量资源⚡️
Taboola/Outbrain /Bing⚡️一级代理开户投流-7*24h❤️人工在线【官方】❤️搜索套利买量投流开户独立站⚡️开户投放
FB BM不限额,短id账单户E.PN 虚拟卡BINOM TRACKER 60% OFF!比Adplexity还好用的Spy工具
ADPLEXITY + ADVERTCN7200W全球动态不重复住宅IP代理虚拟信用卡+独立站收款全球虚拟卡, 支持U充值
Facebook 批量上广告尤里改 - FB 稳定投放免费黑五教程(持续更新、欢迎交流)FB 三不限源头 - 自助下户充值转款
各种主页、账单户、BM户(优势)⚡️个人户,bm户不限额,账单户Google、Bing官方总代  联盟流量开户FB资源,账单户,分享户,国内一手
FB企业户BM户账单户源头海外CL企业户源头PTM全球虚拟卡—进来交个朋友!PTM虚拟卡⚡️费率透明⚡️额度随心
FB虚拟卡⚡️消费越多返现越多虚拟卡 - Pay2.House【找量】BA独家Nutra单找量虚拟FB卡 ⚡️ 透明条件 
国内外持牌,虚拟信用卡和收付款->Tyver SPY汇聚海量广告创意广告位出租8500万高质量住宅IP,助力各种需求
虚拟卡返佣1%,国内持牌机构   
123
返回列表 发新帖
楼主: 阿百川

[业界] 求采集ezinearticles的高招,封ip太狠了

[复制链接]

5

主题

16

广告币

89

积分

初级会员

Rank: 2

积分
89
发表于 2013-11-26 21:02:39 | 显示全部楼层
Lemft
可以修改 User Agent 为google的爬虫,它就不敢轻易的封你了
回复 支持 反对

使用道具 举报

3

主题

56

广告币

184

积分

初级会员

Rank: 2

积分
184

社区QQ达人

发表于 2013-11-26 21:14:39 | 显示全部楼层
阿百川 发表于 2013-11-26 20:54
; ~- Z, T5 p5 n! |) V十几万,用gg缓存采的差不多了,本来想搞整站来着
/ C3 N' {5 P3 E7 z1 O
刚找到方法采,都差不多那算了
回复 支持 反对

使用道具 举报

54

主题

9

广告币

6010

积分

禁止访问

积分
6010
 楼主| 发表于 2013-11-27 07:33:40 | 显示全部楼层
微笑君 发表于 2013-11-26 21:02
/ A+ U. `* Z/ i( k3 F可以修改 User Agent 为google的爬虫,它就不敢轻易的封你了

5 A7 C! h. w( M! E8 O7 Y: _' t3 P各种爬虫、手机端的ua都试过,没用
回复 支持 反对

使用道具 举报

54

主题

9

广告币

6010

积分

禁止访问

积分
6010
 楼主| 发表于 2013-11-27 07:34:47 | 显示全部楼层
小俞 发表于 2013-11-26 21:14 ) m2 O  l; i0 G$ X1 ?
刚找到方法采,都差不多那算了

) t- J' G( \/ p  Z3 y" O$ |求方法,看看可不可以提高效率去扒整站
回复 支持 反对

使用道具 举报

SIR 该用户已被删除
发表于 2013-11-27 07:41:24 | 显示全部楼层
测试时间间隔撒,采集这个本来就是长期打算的,楼主太急了。不要一下子吃成胖子哈
回复 支持 反对

使用道具 举报

54

主题

9

广告币

6010

积分

禁止访问

积分
6010
 楼主| 发表于 2013-11-27 17:32:43 | 显示全部楼层
SIR 发表于 2013-11-27 07:41 2 r. \1 o2 C2 C! ?
测试时间间隔撒,采集这个本来就是长期打算的,楼主太急了。不要一下子吃成胖子哈 ...
4 f( n: |2 n( L7 Z) d8 p
恩,看现在这批数据的处理结果如何,如果不错就慢慢采
回复 支持 反对

使用道具 举报

3

主题

3

广告币

14

积分

新手上路

Rank: 1

积分
14
发表于 2013-12-8 17:31:42 | 显示全部楼层
我曾使用的办法) o3 ~: y9 i* h% e5 U4 P
1、google  iP 代理,会找到一些提供免费代理ip网站0 c- t) I' |9 g- e3 U/ o  @
2、分别打开每个网站,复制ip和端口号到excell
3 a* [' G7 S& b2 N, u; P) X3、调整excell,最终得到一个表只有一列,形如199.199.199.199:199,过程繁琐,不过熟练了也快, J- h# I. k# Y
4、所有的ip和端口号用逗号隔开,保存到一个文本文件
7 D; Q8 q6 {3 U) a% ^8 d, D5、php做一个程序,读取这个文本文件,按逗号保存到一个数组中,每次随机取出一个8 X( e3 r7 z2 W: A( l% z9 L1 U
6、php写一段采集代码,用取出的这个代理ip,用完以后从数组中删除这个ip,把整个数组再用逗号隔开,保存到同名文本文件
! D5 X% p. b/ O/ K) ~# K4 H( Z1 N7、隔几天到那几个网站,复制新的代理ip
, r1 F6 [9 b) }" @+ n. o0 `8、重复以上步骤
回复 支持 反对

使用道具 举报

54

主题

9

广告币

6010

积分

禁止访问

积分
6010
 楼主| 发表于 2013-12-9 07:31:33 | 显示全部楼层
jk1s 发表于 2013-12-8 17:31
5 A" h' N! A5 @, e7 v  c我曾使用的办法
" Z9 d4 C1 F0 J( N- V1、google  iP 代理,会找到一些提供免费代理ip网站
3 H. {* w0 p( B8 Y2、分别打开每个网站,复制ip和端口号 ...
1 ^, S3 Z$ a) u
也是采集的ez?多久之前?  x3 {7 P" T$ X# E+ D
! Q8 n' s8 g* @1 o  C  Q, [4 o
尝试过使用代理,效率很差
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关于我们|联系我们|DMCA|广告服务|小黑屋|手机版|Archiver|Github|网站地图|AdvertCN

GMT+8, 2025-7-28 14:33 , Processed in 0.048910 second(s), 18 queries , Gzip On, MemCache On.

Copyright © 2001-2023, AdvertCN

Proudly Operating in Hong Kong.

快速回复 返回顶部 返回列表