采集amazon经常返回不同的模板，求解决

joul · 发表于 2013-5-16 16:21:45

阿百川发表于 2013-5-16 15:38
. j# S4 U6 z% J$ z4 s& `+ [有几个规则不好处理，如果加上了效率反而比while还低

有点疑惑，同一产品页面每次request会有不同的模板？好像没遇到过。

如果同一产品页面每次request有不同模板，while效率要比轮询规则高（总有一次会while到那个模板）；如果同一页面每次request都是一个模板，则可以默认为A规则，采集到了就不轮询，采集不到就换其他规则。做得更智能的话，可以程序动态调整默认规则，提高效率。

阿百川 · 发表于 2013-5-16 16:41:11

joul 发表于 2013-5-16 16:21 8 f- W2 ]0 M+ V' J
有点疑惑，同一产品页面每次request会有不同的模板？好像没遇到过。) ^8 e; n8 K( I2 v( x

' D) F* x7 U; M; Y# n如果同一产品页面每次request有不同 ...

嗯，同产品，同request，就测试出了三种模板，第三种模板太麻烦就改用while了，目前测试了几千条数据，while最多不超过10次

joul · 发表于 2013-5-16 16:46:24

阿百川发表于 2013-5-16 16:41
- T4 y0 ]9 s( M: V6 V嗯，同产品，同request，就测试出了三种模板，第三种模板太麻烦就改用while了，目前测试了几千条数据，wh ...

学习了！这样的话，只能用while保险了，只是效率慢了些。

阿百川 · 发表于 2013-5-16 17:37:40

joul 发表于 2013-5-16 16:46 5 s2 b3 Z" E( ^- v- o/ G
学习了！这样的话，只能用while保险了，只是效率慢了些。

开多线程，速度勉强还可以

beijixing · 发表于 2013-5-21 17:28:31

amazon这种活跃的网站肯定经常改版啊，你只能跟着变，可以写一个监控amazon模板变化的程序，一旦模板变了就跟进吧

		自动登录	找回密码
密码			立即注册

谷歌+Bing+TT+MSN官方代理	⚡️按条S5代理⚡️静态⚡️独享⚡️5G	皇家代理IP?⚡️#1性价比⚡️	指纹浏览器，就用AdsPower
Mediabuy⚡️玩家开户首选	【鲁班跨境通-自助充值转账】	FB/GG/TT❤️官方免费开户	Affiliate 全媒体流量资源⚡️
Taboola/Outbrain /Bing⚡️一级代理	*开户投流-724h❤️人工在线**	【官方】❤️搜索套利买量投流开户	独立站⚡️开户投放
FB BM不限额，短id账单户	E.PN 虚拟卡	DuoPlus专注打造跨境电商云手机	BINOM TRACKER 60% OFF!
比Adplexity还好用的Spy工具	ADPLEXITY + ADVERTCN	7200W全球动态不重复住宅IP代理	虚拟信用卡+独立站收款
全球虚拟卡, 支持U充值	Facebook 批量上广告	尤里改 - FB 稳定投放	免费黑五教程（持续更新、欢迎交流）
FB 三不限源头 - 自助下户充值转款	各种主页、账单户、BM户（优势）	⚡️个人户，bm户不限额，账单户	IPCola原生住宅IP⚡️$1.8/条双ISP
Google、Bing官方总代联盟流量开户	FB资源，账单户，分享户，国内一手	FB企业户BM户账单户源头	PTM全球虚拟卡—进来交个朋友!
PTM虚拟卡⚡️费率透明⚡️额度随心	FB虚拟卡⚡️消费越多返现越多	虚拟卡 - Pay2.House	【找量】BA独家Nutra单找量
广告位出租	8500万高质量住宅IP，助力各种需求	虚拟卡返佣1%，国内持牌机构

采集amazon经常返回不同的模板，求解决

社区QQ达人