亞馬遜采集數(shù)據(jù)原理

發(fā)帖100次被置頂1次被推薦1次質(zhì)量分2星回帖互動2136次歷史交流熱度41.28% 歷史交流深度0%

關(guān)于采集數(shù)據(jù)，市面上各類爬蟲軟件使用，這里簡單說說使用，

第一種可以任意采集類目數(shù)據(jù)，前提給出類目鏈接（也就是類目id，這里稱node id）。
第二種：我想采集某個bestseller或某個關(guān)鍵詞的鏈接，那么丟下鏈接即可
第三種：關(guān)鍵詞等形式。比如我想采集iphone關(guān)鍵詞下的數(shù)據(jù)，輸入iphone 即可，。

? ? ?大家很想知道類目數(shù)據(jù)是如何采集下來的？一個類目十幾萬到幾十萬asin數(shù)據(jù)不等，怎么采?這就是第一種采集方式，第一種很多人比較難理解，一個類目很多關(guān)鍵詞產(chǎn)品，如何能采集完呢？那么就需要利用以下方法了。如果我想采集某個小類目，那么你只需要按照下面來：

例如某個類目nodeid的鏈接如下表示：www.amazon.com/b?node=1044510

nodeDI通用公式：=核心鏈接制定數(shù)字

www.amazon.com/b?node= 1044510（后臺下載ID數(shù)字），知道這個規(guī)律后即可用爬蟲采集任意類目鏈接分類了，啊哈哈哈，那么你需要采集某個類目只需要去運營后臺選擇類目id編號，放到這個通用公司里面后把類似“www.amazon.com/b?node=1044510”放到創(chuàng)想這類采集器即可，理論上來說這個類目所有asin都會被采集出來。

這個工具有幾年了，鑒于很多童鞋還在用爬蟲辛苦爬，可能還不知道現(xiàn)成的軟件，我下面給出個簡單數(shù)據(jù)采集軟件：淘寶搜創(chuàng)想，使用流程如下。此類軟件由于ip會經(jīng)常被屏蔽，所以下載效果一般是幾百條asin數(shù)據(jù)采集完就會斷掉，并不能全部采集完。曉生使用感受，啊哈哈哈。大家也可以用火車頭、八爪魚等采集器，后者有免費且相對簡單，火車頭就得學上十多個小時了。

? ? 順便把修改鏈接采集關(guān)鍵詞的方法也在這里說下：
? 亞馬孫搜索熱詞采集方式
比如：手動網(wǎng)址采集關(guān)鍵詞：iphone7 c，我想把和這個詞組有關(guān)的詞都采集下來，那么只需要按照下列方式進行：

? 這樣你需要一個個復制，那我們懶得復制和搜索情況下，，可以采用下面修改鏈接形式
? ? https://completion.amazon.com/ ... b%3D1

? ? 采集結(jié)果顯示有10個與搜索的基本結(jié)果一致：
completion = ["iphone 7 c",["iphone 7 case","iphone 7 charger","iphone 7 case for girls","iphone 7 case otterbox","iphone 7 clear case","iphone 7 charger and headphone jack","iphone 7 case wallet","iphone 7 car charger","iphone 7 car mount","iphone 7 charger case"],[{"nodes":[{"name":"Electronics","alias":"electronics"},{"name":"Cell Phones & Accessories","alias":"mobile"}]},{},{},{},{},{},{},{},{},{}],,"193FH2Y38K88D"];String()