采集amazon经常返回不同的模板，求解决

joul · 发表于 2013-5-16 16:21:45

阿百川发表于 2013-5-16 15:38 $ U) f |( l7 L4 `
有几个规则不好处理，如果加上了效率反而比while还低

有点疑惑，同一产品页面每次request会有不同的模板？好像没遇到过。

如果同一产品页面每次request有不同模板，while效率要比轮询规则高（总有一次会while到那个模板）；如果同一页面每次request都是一个模板，则可以默认为A规则，采集到了就不轮询，采集不到就换其他规则。做得更智能的话，可以程序动态调整默认规则，提高效率。

阿百川 · 发表于 2013-5-16 16:41:11

joul 发表于 2013-5-16 16:21 1 A# ?6 A7 r6 b. K$ E
有点疑惑，同一产品页面每次request会有不同的模板？好像没遇到过。
7 u& C1 d7 n1 R% S( Z7 q1 u/ {) U% Z( i7 \) d& Z) j
如果同一产品页面每次request有不同 ...

嗯，同产品，同request，就测试出了三种模板，第三种模板太麻烦就改用while了，目前测试了几千条数据，while最多不超过10次

joul · 发表于 2013-5-16 16:46:24

阿百川发表于 2013-5-16 16:41 ) r1 Y8 k' ]3 y0 I5 L/ t
嗯，同产品，同request，就测试出了三种模板，第三种模板太麻烦就改用while了，目前测试了几千条数据，wh ...

学习了！这样的话，只能用while保险了，只是效率慢了些。

阿百川 · 发表于 2013-5-16 17:37:40

joul 发表于 2013-5-16 16:46 + `! x) s* I- }0 c- M7 m, z& H
学习了！这样的话，只能用while保险了，只是效率慢了些。

开多线程，速度勉强还可以

beijixing · 发表于 2013-5-21 17:28:31

amazon这种活跃的网站肯定经常改版啊，你只能跟着变，可以写一个监控amazon模板变化的程序，一旦模板变了就跟进吧

		自动登录	找回密码
密码			立即注册

谷歌+Bing+TT+MSN官方代理	⚡️按条S5代理⚡️静态⚡️独享⚡️5G	需要代理IP?⚡️Proxysites.ai⚡️	指纹浏览器，就用AdsPower
Mediabuy⚡️玩家开户首选	【鲁班跨境通-自助充值转账】	FB/GG/TT❤️官方免费开户	Affiliate 全媒体流量资源⚡️
Taboola/Outbrain /Bing⚡️一级代理	*开户投流-724h❤️人工在线**	【官方】❤️搜索套利买量投流开户	独立站⚡️开户投放
DuoPlus专注打造跨境电商云手机	E.PN 虚拟卡	BINOM TRACKER 60% OFF!	比Adplexity还好用的Spy工具
MediaGo+Taboola+Ob开户	百度国际MediaGo⚡️让产品狂奔全球	百度国际，高点击转化，快速放量	百度国际MediaGo，独家原生流量
ADPLEXITY + ADVERTCN	7200W全球动态不重复住宅IP代理	虚拟信用卡+独立站收款	全球虚拟卡, 支持U充值
Facebook 批量上广告	尤里改 - FB 稳定投放	免费黑五教程（持续更新、欢迎交流）	FB 三不限源头 - 自助下户充值转款
各种主页、账单户、BM户（优势）	⚡️个人户，bm户不限额，账单户	一手BM分享户不限额	9Proxy ⚡️ $0.04/IP, 无限带宽
IPCola原生住宅IP⚡️$2.1/条双ISP	FB二三解0.1元一个	虚拟卡\|PTM星际卡	FB专用虚拟卡
Google、Bing官方总代联盟流量开户	FB账号资源/稳定靠谱/运行5年啦	FB开户代投/三不限/白名单	fb耐用号0.01一个
fb账号官方合作商	搜索套利开户❤️Bigo/Kwai/Mediago	FB资源，账单户，分享户，国内一手	FB企业户BM户账单户源头
广告位出租

采集amazon经常返回不同的模板，求解决

社区QQ达人