AdvertCN - 广告中国

 找回密码
 立即注册

QQ登录

只需一步,快速开始

Binom
 谷歌+Bing+TT+MSN官方代理 
⚡️按条S5代理⚡️静态⚡️独享⚡️5G⚡️最干净<Wifi住宅+5G移动>IP代理指纹浏览器,就用AdsPower
Mediabuy⚡️玩家开户首选【鲁班跨境通-自助充值转账】FB/GG/TT❤️官方免费开户Affiliate 全媒体流量资源⚡️
Taboola/Outbrain /Bing⚡️一级代理开户投流-7*24h❤️人工在线【官方】❤️搜索套利广告开户独立站⚡️开户投放
DuoPlus专注打造跨境电商云手机E.PN 虚拟卡BINOM TRACKER 60% OFF!比Adplexity还好用的Spy工具
MediaGo+Taboola+Ob开户百度国际MediaGo⚡️让产品狂奔全球百度国际,高点击转化,快速放量百度国际MediaGo,独家原生流量
ADPLEXITY + ADVERTCN7200W全球动态不重复住宅IP代理虚拟信用卡+独立站收款全球虚拟卡, 支持U充值
Facebook 批量上广告尤里改 - FB 稳定投放免费黑五教程(持续更新、欢迎交流)FB 三不限源头 - 自助下户充值转款
各种主页、账单户、BM户(优势)⚡️个人户,bm户不限额,账单户一手BM分享户不限额9Proxy ⚡️ $0.04/IP, 无限带宽
FB二三解0.1元一个虚拟卡|PTM星际卡FB专用虚拟卡Google、Bing官方总代  联盟流量开户
FB账号资源/稳定靠谱/运行5年啦FB开户代投/三不限/白名单fb耐用号0.01一个fb账号官方合作商
广告位出租   
查看: 7695|回复: 13

有没有方法大批量复制亚马逊上的产品名称呢

[复制链接]

584

主题

1935

广告币

3703

积分

金牌会员

Rank: 6Rank: 6

积分
3703
发表于 2015-7-31 11:25:54 | 显示全部楼层 |阅读模式
回复

使用道具 举报

584

主题

1935

广告币

3703

积分

金牌会员

Rank: 6Rank: 6

积分
3703
 楼主| 发表于 2015-7-31 11:53:13 | 显示全部楼层
回复 支持 反对

使用道具 举报

26

主题

836

广告币

1784

积分

高级会员

Rank: 4

积分
1784
发表于 2015-7-31 12:14:56 | 显示全部楼层
API或者采集

点评

API怎么用? 采集用那个软件,怎么设置? 谢谢!  详情 回复 发表于 2015-7-31 13:58

评分

参与人数 1广告币 +5 收起 理由
luck + 5 很给力!

查看全部评分

回复 支持 反对

使用道具 举报

584

主题

1935

广告币

3703

积分

金牌会员

Rank: 6Rank: 6

积分
3703
 楼主| 发表于 2015-7-31 13:58:07 | 显示全部楼层
ads419 发表于 2015-7-31 12:149 h9 q6 l1 w+ h/ n( g- F3 I
API或者采集

. W! k. b" [+ w' `8 ?API怎么用?5 e; A/ o: |/ P2 I$ M- d, `! ?& K
采集用那个软件,怎么设置?
0 @2 O/ z) i+ k, @2 o3 F, Z7 }" U4 C( d
谢谢!

点评

API怎么用要看文档啊 采集的话工具很多,比如火车头,使用方法和设置当然也是看文档啊  详情 回复 发表于 2015-7-31 15:58
回复 支持 反对

使用道具 举报

2

主题

1360

广告币

1722

积分

高级会员

Rank: 4

积分
1722

社区QQ达人

发表于 2015-7-31 14:52:31 | 显示全部楼层
有,大半年前的数据,amazon.com里面有不到两万六千万的产品数据。
3 _8 s* [) `8 S' p# b可以获取到产品名称和产品对应的网址,直接加上tag=your-xxx就可以推广了

点评

我现在想知道如何采集啊,请仔细说说啊。 谢谢!  详情 回复 发表于 2015-7-31 15:54

评分

参与人数 1广告币 +5 收起 理由
luck + 5 很给力!

查看全部评分

回复 支持 反对

使用道具 举报

584

主题

1935

广告币

3703

积分

金牌会员

Rank: 6Rank: 6

积分
3703
 楼主| 发表于 2015-7-31 15:54:07 | 显示全部楼层
李小冲 发表于 2015-7-31 14:52  r- Y/ t, W3 X9 ^$ o) f' j
有,大半年前的数据,amazon.com里面有不到两万六千万的产品数据。
& M7 z$ ~% ], b; p可以获取到产品名称和产品对应的网址, ...

. t% L& e2 i3 |8 ~7 [我现在想知道如何采集啊,请仔细说说啊。! o3 K$ y  l$ I. z& c& }7 D
1 a6 V  t/ Y- y1 w1 r6 g1 K
谢谢!
回复 支持 反对

使用道具 举报

26

主题

836

广告币

1784

积分

高级会员

Rank: 4

积分
1784
发表于 2015-7-31 15:58:40 | 显示全部楼层
luck 发表于 2015-7-31 13:58
$ ^( [$ d- R- W$ L: k# aAPI怎么用?
8 n0 S; O- C) n6 \$ b/ g采集用那个软件,怎么设置?
: e* g2 L, F* r+ n
API怎么用要看文档啊
/ A5 A6 n+ M' u; w$ I! r( o& a* X采集的话工具很多,比如火车头,使用方法和设置当然也是看文档啊
回复 支持 反对

使用道具 举报

2

主题

1360

广告币

1722

积分

高级会员

Rank: 4

积分
1722

社区QQ达人

发表于 2015-7-31 17:09:37 | 显示全部楼层
你要的只是产品名称和产品URL吧。
- U& m3 i/ h' P: E* N7 J: E' r很简单:
2 k0 X6 i& l, e1.打开amazon.com的robots.txt文件,找到sitemap:8 X( [1 ~* n# i( f. ^
http://www.amazon.com/robots.txt
$ _+ b% `3 U: ^+ ^+ J
  1. # Sitemap files* _. z& D. S! O& D7 v  M8 c9 m7 u
  2. Sitemap: http://www.amazon.com/sitemap-manual-index.xml& v: b; }& j; E; ~2 j- N% a- H' m
  3. Sitemap: http://www.amazon.com/sitemap_vendor_videos_us.xml
    ) e0 |" r: v  A' G! ~
  4. Sitemap: http://www.amazon.com/sitemaps.4acb100d6c5a79c.SitemapIndex_0.xml.gz
    : O! `: o- D& x, T- Y' A5 `' @& v
  5. Sitemap: http://www.amazon.com/sitemaps.f3053414d236e84.SitemapIndex_0.xml.gz
    ! N6 p! B) {$ t' N) |! f: [' g
  6. Sitemap: http://www.amazon.com/sitemaps.1946f6b8171de60.SitemapIndex_0.xml.gz
    6 Z  c/ D% Y/ u/ Q4 C3 w- k1 l
  7. Sitemap: http://www.amazon.com/sitemaps.bbb7d657c7e29fa.SitemapIndex_0.xml.gz
    , t  b2 J. t" f3 g' }* e  \
  8. Sitemap: http://www.amazon.com/sitemaps.11aafed315ee654.SitemapIndex_0.xml.gz
    1 u* I1 F; T. C
  9. Sitemap: http://www.amazon.com/sitemaps.c21f969b5f03d33.SitemapIndex_0.xml.gz
    ' U" q# Q2 i/ i( n) B
  10. Sitemap: http://www.amazon.com/sitemaps.1470994145d5519.SitemapIndex_0.xml.gz
复制代码
2.找到相对应的产品的sitemap的索引压缩文件。
0 T! p4 {: U! V7 M6 F- n2 [& z3.下载索引压缩文件后解压。
8 o. p% Z6 U' N6 _  x4.将解压后的索引文件只的sitemap的url取出来,放到迅雷里面将上百个对应的产品sitemap的压缩文件下载下来。
2 C: c1 W3 t. {, q5.下载后解压这些sitemap压缩文件。
- o" E# y% v8 O- b8 S) d6.写程序读取解压后的xml文件,取出里面的<loc>http://www.amazon.com/你要的产品名称等 </loc>值存到数据库里就可以了。! D' ^: C  d& |! z! m
7.没有什么了吧,剩下就由你自己发挥弄吧。
  d2 E- k7 Y0 `, Q* i, A0 N6 k( t1 J, G2 r+ f# ]
感觉利用sitemap的方法能快一些,我没有用过api,听说api有调用限制的。- v1 q8 a! F8 F: c; [

- j' O" R- a" ~各位喜欢的赶快顶我一下吧。
  X5 e- I9 o) K0 ]+ U! S- y* p8 Z; V7 @

点评

早点看到你的回复就好了,我之前都是用DOMXPath分析网页URL规律,提取分页页数,提取大分类,。。。。分类N的url,然后循环请求几十万次最后得到商品列表。。。结果我昨天发现用sitemap太方便了,直接就采集了,url  详情 回复 发表于 2015-8-2 20:48

评分

参与人数 1广告币 +2 收起 理由
shadowfiend + 2

查看全部评分

回复 支持 反对

使用道具 举报

10

主题

831

广告币

1346

积分

高级会员

Rank: 4

积分
1346

社区QQ达人

发表于 2015-7-31 21:03:38 | 显示全部楼层
回复楼上,他一定不懂。
回复 支持 反对

使用道具 举报

20

主题

33

广告币

233

积分

初级会员

Rank: 2

积分
233
发表于 2015-8-1 03:18:25 | 显示全部楼层
火车头采集
回复 支持 反对

使用道具 举报

11

主题

35

广告币

281

积分

初级会员

Rank: 2

积分
281

社区QQ达人

发表于 2015-8-2 17:17:31 | 显示全部楼层
同上,火车头采集比较易上手
回复 支持 反对

使用道具 举报

2

主题

1360

广告币

1722

积分

高级会员

Rank: 4

积分
1722

社区QQ达人

发表于 2015-8-2 20:24:02 | 显示全部楼层
火车头采集两亿六千多万的数据得需要多久呢,而且从哪里开始作为采集的入口呢
回复 支持 反对

使用道具 举报

22

主题

40

广告币

240

积分

初级会员

Rank: 2

积分
240
发表于 2015-8-2 20:48:03 | 显示全部楼层
李小冲 发表于 2015-7-31 17:09
$ Z. O# m# W3 H5 `% e7 m! |你要的只是产品名称和产品URL吧。! ~4 v6 h/ @# P) z/ w! f4 M" U% s
很简单:
; y+ @6 J5 N  a5 `7 x1.打开amazon.com的robots.txt文件,找到sitemap:

* G8 b/ t6 E8 f早点看到你的回复就好了,我之前都是用DOMXPath分析网页URL规律,提取分页页数,提取大分类,。。。。分类N的url,然后循环请求几十万次最后得到商品列表。。。结果我昨天发现用sitemap太方便了,直接就采集了,url很全,不用自己去收集url,问题来了,是买n个vps服务器(n个ip同时采集),还是买高匿代理ip,这个我不太懂,我就用的家里ip采集,不敢快了

点评

你是需要采集不仅仅是产品名称,还有产品图片等其它属性么 产品图片不建议采,太占用空间了,可以直接调用amazon的产品地址,你可以进入aff后台,找到产品推广的地方,看看产品对应的图片就明白啦,我就使用的是amaz  详情 回复 发表于 2015-8-2 22:31
回复 支持 反对

使用道具 举报

2

主题

1360

广告币

1722

积分

高级会员

Rank: 4

积分
1722

社区QQ达人

发表于 2015-8-2 22:31:24 | 显示全部楼层
zhuzhaodan 发表于 2015-8-2 20:48/ `: t9 _3 z- G$ R
早点看到你的回复就好了,我之前都是用DOMXPath分析网页URL规律,提取分页页数,提取大分类,。。。。分 ...
1 X% w! h$ i" p. ~
你是需要采集不仅仅是产品名称,还有产品图片等其它属性么$ `( `  q: k  X: D; A7 p6 b! r
产品图片不建议采,太占用空间了,可以直接调用amazon的产品地址,你可以进入aff后台,找到产品推广的地方,看看产品对应的图片就明白啦,我就使用的是amazon的图片地址。+ S# \1 {& V! k, N5 H3 g
回复 支持 反对

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

关于我们|联系我们|DMCA|广告服务|小黑屋|手机版|Archiver|Github|网站地图|AdvertCN

GMT+8, 2024-11-26 07:46 , Processed in 0.056039 second(s), 16 queries , Gzip On, MemCache On.

Copyright © 2001-2023, AdvertCN

Proudly Operating in Hong Kong.

快速回复 返回顶部 返回列表