AdvertCN - 广告中国

 找回密码
 立即注册

QQ登录

只需一步,快速开始

 谷歌+Bing+TT+MSN官方代理 
⚡️按条S5代理⚡️静态⚡️独享⚡️5G⚡️最干净<Wifi住宅+5G移动>IP代理泰国仓储,本土仓发货2-3元/单
指纹浏览器,就用AdsPower谷歌/FB/Bing/Yahoo代理商开户7200W全球动态不重复住宅IP代理BINOM TRACKER 60% OFF!
【广户】
⚡️我们很有钱这些广告位都是我买的FB/Google/TK点我开户⚡️
出售Facebook,友缘号,FB广告号,insFB/TT/KW 加白开户ADPLEXITY + ADVERTCN比Adplexity还好用的Spy工具
MediaGo+Taboola+Ob开户百度国际MediaGo⚡️让产品狂奔全球百度国际,高点击转化,快速放量百度国际MediaGo,独家原生流量
虚拟信用卡+独立站收款行业首创新型指纹Cloak, 谷歌奇效!⚡IPFoxy住宅代理全场88折⚡全球虚拟卡, 支持U充值
各种主页、账单户、BM户(优势)⚡️个人户,bm户不限额,账单户Adsterra 的CPA/CPM/CPC 网站流量在线注册美国/英国/香港等海外公司
EU KETO/CBD - JumbleberryFB二三解1元/个9Proxy ⚡️ $0.04/IP, 无限带宽 cloak斗篷/ss/nutra/cpa/Dating
广告位出租全球低价纯净住宅/移动IP-免费试用广告代投, 东南亚物流, 虚拟信用卡VMLogin指纹浏览器+多账号防关联
123
返回列表 发新帖
楼主: 阿百川

[业界] 求采集ezinearticles的高招,封ip太狠了

[复制链接]

5

主题

16

广告币

89

积分

初级会员

Rank: 2

积分
89
发表于 2013-11-26 21:02:39 | 显示全部楼层
adsterra
可以修改 User Agent 为google的爬虫,它就不敢轻易的封你了
回复 支持 反对

使用道具 举报

3

主题

56

广告币

184

积分

初级会员

Rank: 2

积分
184

社区QQ达人

发表于 2013-11-26 21:14:39 | 显示全部楼层
阿百川 发表于 2013-11-26 20:54
; v/ H' q  a* `* ~十几万,用gg缓存采的差不多了,本来想搞整站来着

6 L0 ~4 n& Z# M4 U5 N  K: n% [. F刚找到方法采,都差不多那算了
回复 支持 反对

使用道具 举报

54

主题

9

广告币

6010

积分

禁止访问

积分
6010
 楼主| 发表于 2013-11-27 07:33:40 | 显示全部楼层
微笑君 发表于 2013-11-26 21:02 9 I! W0 w, A; Z  _! z1 c  J
可以修改 User Agent 为google的爬虫,它就不敢轻易的封你了

) h; b8 X3 c$ x2 Z4 T各种爬虫、手机端的ua都试过,没用
回复 支持 反对

使用道具 举报

54

主题

9

广告币

6010

积分

禁止访问

积分
6010
 楼主| 发表于 2013-11-27 07:34:47 | 显示全部楼层
小俞 发表于 2013-11-26 21:14
) h! c! J3 P8 u刚找到方法采,都差不多那算了

% W* W- L% _5 @# V9 ^; g* f: h2 L求方法,看看可不可以提高效率去扒整站
回复 支持 反对

使用道具 举报

SIR 该用户已被删除
发表于 2013-11-27 07:41:24 | 显示全部楼层
测试时间间隔撒,采集这个本来就是长期打算的,楼主太急了。不要一下子吃成胖子哈
回复 支持 反对

使用道具 举报

54

主题

9

广告币

6010

积分

禁止访问

积分
6010
 楼主| 发表于 2013-11-27 17:32:43 | 显示全部楼层
SIR 发表于 2013-11-27 07:41
7 H& t" ?% d, S. j测试时间间隔撒,采集这个本来就是长期打算的,楼主太急了。不要一下子吃成胖子哈 ...
1 v# f3 W5 W+ u* B+ T
恩,看现在这批数据的处理结果如何,如果不错就慢慢采
回复 支持 反对

使用道具 举报

3

主题

3

广告币

14

积分

新手上路

Rank: 1

积分
14
发表于 2013-12-8 17:31:42 | 显示全部楼层
我曾使用的办法
: i- x8 Y, o" }& {: i. D1、google  iP 代理,会找到一些提供免费代理ip网站
, t2 x0 S* \, @' @3 G2、分别打开每个网站,复制ip和端口号到excell; n$ Z5 C5 K* I% U
3、调整excell,最终得到一个表只有一列,形如199.199.199.199:199,过程繁琐,不过熟练了也快# J' M. K; ]% `8 O& z! Y
4、所有的ip和端口号用逗号隔开,保存到一个文本文件* s; d  y7 \8 N5 Y5 x
5、php做一个程序,读取这个文本文件,按逗号保存到一个数组中,每次随机取出一个
% y, ]& R' ^# r! d3 y. C) h6、php写一段采集代码,用取出的这个代理ip,用完以后从数组中删除这个ip,把整个数组再用逗号隔开,保存到同名文本文件
; {, P  f4 E) `8 d7、隔几天到那几个网站,复制新的代理ip
) e' q. U- d+ \8、重复以上步骤
回复 支持 反对

使用道具 举报

54

主题

9

广告币

6010

积分

禁止访问

积分
6010
 楼主| 发表于 2013-12-9 07:31:33 | 显示全部楼层
jk1s 发表于 2013-12-8 17:31 : e; L% f3 Y. q4 \
我曾使用的办法
# d6 |1 T# _/ r4 V1、google  iP 代理,会找到一些提供免费代理ip网站6 m/ B& r) W6 v
2、分别打开每个网站,复制ip和端口号 ...
8 \: y/ z5 S" s. T8 Y' @6 {1 V
也是采集的ez?多久之前?
5 Z& j# i9 c' g0 G' m8 \' l. o4 D" V" y4 }; ]$ g
尝试过使用代理,效率很差
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关于我们|联系我们|DMCA|广告服务|小黑屋|手机版|Archiver|Github|网站地图|AdvertCN

GMT+8, 2024-5-20 13:49 , Processed in 0.046819 second(s), 18 queries , Gzip On, MemCache On.

Copyright © 2001-2023, AdvertCN

Proudly Operating in Hong Kong.

快速回复 返回顶部 返回列表