采集amazon经常返回不同的模板，求解决

joul · 发表于 2013-5-16 16:21:45

阿百川发表于 2013-5-16 15:38 ' T7 M1 P) x5 x9 z) _
有几个规则不好处理，如果加上了效率反而比while还低

有点疑惑，同一产品页面每次request会有不同的模板？好像没遇到过。

如果同一产品页面每次request有不同模板，while效率要比轮询规则高（总有一次会while到那个模板）；如果同一页面每次request都是一个模板，则可以默认为A规则，采集到了就不轮询，采集不到就换其他规则。做得更智能的话，可以程序动态调整默认规则，提高效率。

阿百川 · 发表于 2013-5-16 16:41:11

joul 发表于 2013-5-16 16:21 ) e* R; j5 N" f v. M: [& A
有点疑惑，同一产品页面每次request会有不同的模板？好像没遇到过。% ~3 H. _1 G" `- n! }7 m

; _: n( Z" s) o' e3 a如果同一产品页面每次request有不同 ...

嗯，同产品，同request，就测试出了三种模板，第三种模板太麻烦就改用while了，目前测试了几千条数据，while最多不超过10次

joul · 发表于 2013-5-16 16:46:24

阿百川发表于 2013-5-16 16:41 1 p; h( j! _+ p' u, c# O" a
嗯，同产品，同request，就测试出了三种模板，第三种模板太麻烦就改用while了，目前测试了几千条数据，wh ...

学习了！这样的话，只能用while保险了，只是效率慢了些。

阿百川 · 发表于 2013-5-16 17:37:40

joul 发表于 2013-5-16 16:46
7 ~' \) J1 j, p% s: t5 V学习了！这样的话，只能用while保险了，只是效率慢了些。

开多线程，速度勉强还可以

beijixing · 发表于 2013-5-21 17:28:31

amazon这种活跃的网站肯定经常改版啊，你只能跟着变，可以写一个监控amazon模板变化的程序，一旦模板变了就跟进吧

		自动登录	找回密码
密码			立即注册

Google-Bing-Mediago-Criteo开户	⚡️按条S5代理⚡️静态⚡️独享⚡️5G	广告专用虚拟卡/U充值/高返点	皇家代理IP⚡️#1性价比⚡️
Mediabuy⚡️玩家开户首选	【鲁班跨境通-自助充值转账】	FB/GG/TT❤️官方免费开户	Affiliate 全媒体流量资源⚡️
Taboola/Outbrain /Bing⚡️一级代理	*开户投流-724h❤️人工在线**	【官方】❤️搜索套利买量投流开户	独立站⚡️开户投放
Google FB TK游戏代投	⚡️E.PN 虚拟卡⚡️	BINOM TRACKER 60% OFF!	比Adplexity还好用的Spy工具
ADPLEXITY + ADVERTCN	7200W全球动态不重复住宅IP代理	虚拟信用卡+独立站收款	全球虚拟卡, 支持U充值
Facebook 批量上广告	尤里改 - FB 稳定投放	免费黑五教程（持续更新、欢迎交流）	FB 三不限源头 - 自助下户充值转款
各种主页、账单户、BM户（优势）	IPCola原生住宅IP⚡️$1.8/条双ISP	FB资源，账单户，分享户，国内一手	TK加白户/二解户/FB海外户/GG老户
最大欧洲Nutra网盟BA找量	FB高权重耐操个号⚡️稳定过审	FB企业户海外户,授信户,TK加白户	联盟收款/海外资金下发/服贸结汇
✔Taboola海外户源头	广告位出租	虚拟卡返佣1%，国内持牌机构

采集amazon经常返回不同的模板，求解决

社区QQ达人