社區(qū) 發(fā)現(xiàn) Amazon 亞馬遜采集數(shù)據(jù)原理
亞馬遜采集數(shù)據(jù)原理
發(fā)帖100次
被置頂1次
被推薦1次
質(zhì)量分2星
回帖互動(dòng)2136次
歷史交流熱度41.28%
歷史交流深度0%
關(guān)于采集數(shù)據(jù)，市面上各類爬蟲軟件使用，這里簡(jiǎn)單說(shuō)說(shuō)使用，
第一種可以任意采集類目數(shù)據(jù)，前提給出類目鏈接（也就是類目id，這里稱node id）。
第二種：我想采集某個(gè)bestseller或某個(gè)關(guān)鍵詞的鏈接，那么丟下鏈接即可
第三種：關(guān)鍵詞等形式。比如我想采集iphone關(guān)鍵詞下的數(shù)據(jù)，輸入iphone 即可，。
? ? ?大家很想知道類目數(shù)據(jù)是如何采集下來(lái)的？一個(gè)類目十幾萬(wàn)到幾十萬(wàn)asin數(shù)據(jù)不等，怎么采?這就是第一種采集方式，第一種很多人比較難理解，一個(gè)類目很多關(guān)鍵詞產(chǎn)品，如何能采集完呢？那么就需要利用以下方法了。如果我想采集某個(gè)小類目，那么你只需要按照下面來(lái)：
例如某個(gè)類目nodeid的鏈接如下表示：www.amazon.com/b?node=1044510
nodeDI通用公式：=核心鏈接 制定數(shù)字
www.amazon.com/b?node= 1044510（后臺(tái)下載ID數(shù)字），知道這個(gè)規(guī)律后即可用爬蟲采集任意類目鏈接分類了，啊哈哈哈，那么你需要采集某個(gè)類目只需要去運(yùn)營(yíng)后臺(tái)選擇類目id編號(hào)，放到這個(gè)通用公司里面后把類似“www.amazon.com/b?node=1044510”放到創(chuàng)想這類采集器即可，理論上來(lái)說(shuō)這個(gè)類目所有asin都會(huì)被采集出來(lái)。
這個(gè)工具有幾年了，鑒于很多童鞋還在用爬蟲辛苦爬，可能還不知道現(xiàn)成的軟件，我下面給出個(gè)簡(jiǎn)單數(shù)據(jù)采集軟件：淘寶搜創(chuàng)想，使用流程如下。此類軟件由于ip會(huì)經(jīng)常被屏蔽，所以下載效果一般是幾百條asin數(shù)據(jù)采集完就會(huì)斷掉，并不能全部采集完。曉生使用感受，啊哈哈哈。大家也可以用火車頭、八爪魚等采集器，后者有免費(fèi)且相對(duì)簡(jiǎn)單，火車頭就得學(xué)上十多個(gè)小時(shí)了。
? ? 順便把修改鏈接采集關(guān)鍵詞的方法也在這里說(shuō)下：
? 亞馬孫搜索熱詞采集方式
比如：手動(dòng)網(wǎng)址采集關(guān)鍵詞：iphone7 c，我想把和這個(gè)詞組有關(guān)的詞都采集下來(lái)，那么只需要按照下列方式進(jìn)行：
? 這樣你需要一個(gè)個(gè)復(fù)制，那我們懶得復(fù)制和搜索情況下，，可以采用下面修改鏈接形式
? ? https://completion.amazon.com/ ... b%3D1
? ? 采集結(jié)果顯示有10個(gè)與搜索的基本結(jié)果一致：
completion = ["iphone 7 c",["iphone 7 case","iphone 7 charger","iphone 7 case for girls","iphone 7 case otterbox","iphone 7 clear case","iphone 7 charger and headphone jack","iphone 7 case wallet","iphone 7 car charger","iphone 7 car mount","iphone 7 charger case"],[{"nodes":[{"name":"Electronics","alias":"electronics"},{"name":"Cell Phones & Accessories","alias":"mobile"}]},{},{},{},{},{},{},{},{},{}],,"193FH2Y38K88D"];String()
第一種可以任意采集類目數(shù)據(jù)，前提給出類目鏈接（也就是類目id，這里稱node id）。
第二種：我想采集某個(gè)bestseller或某個(gè)關(guān)鍵詞的鏈接，那么丟下鏈接即可
第三種：關(guān)鍵詞等形式。比如我想采集iphone關(guān)鍵詞下的數(shù)據(jù)，輸入iphone 即可，。
? ? ?大家很想知道類目數(shù)據(jù)是如何采集下來(lái)的？一個(gè)類目十幾萬(wàn)到幾十萬(wàn)asin數(shù)據(jù)不等，怎么采?這就是第一種采集方式，第一種很多人比較難理解，一個(gè)類目很多關(guān)鍵詞產(chǎn)品，如何能采集完呢？那么就需要利用以下方法了。如果我想采集某個(gè)小類目，那么你只需要按照下面來(lái)：
例如某個(gè)類目nodeid的鏈接如下表示：www.amazon.com/b?node=1044510
nodeDI通用公式：=核心鏈接 制定數(shù)字
www.amazon.com/b?node= 1044510（后臺(tái)下載ID數(shù)字），知道這個(gè)規(guī)律后即可用爬蟲采集任意類目鏈接分類了，啊哈哈哈，那么你需要采集某個(gè)類目只需要去運(yùn)營(yíng)后臺(tái)選擇類目id編號(hào)，放到這個(gè)通用公司里面后把類似“www.amazon.com/b?node=1044510”放到創(chuàng)想這類采集器即可，理論上來(lái)說(shuō)這個(gè)類目所有asin都會(huì)被采集出來(lái)。
這個(gè)工具有幾年了，鑒于很多童鞋還在用爬蟲辛苦爬，可能還不知道現(xiàn)成的軟件，我下面給出個(gè)簡(jiǎn)單數(shù)據(jù)采集軟件：淘寶搜創(chuàng)想，使用流程如下。此類軟件由于ip會(huì)經(jīng)常被屏蔽，所以下載效果一般是幾百條asin數(shù)據(jù)采集完就會(huì)斷掉，并不能全部采集完。曉生使用感受，啊哈哈哈。大家也可以用火車頭、八爪魚等采集器，后者有免費(fèi)且相對(duì)簡(jiǎn)單，火車頭就得學(xué)上十多個(gè)小時(shí)了。
? ? 順便把修改鏈接采集關(guān)鍵詞的方法也在這里說(shuō)下：
? 亞馬孫搜索熱詞采集方式
比如：手動(dòng)網(wǎng)址采集關(guān)鍵詞：iphone7 c，我想把和這個(gè)詞組有關(guān)的詞都采集下來(lái)，那么只需要按照下列方式進(jìn)行：
? 這樣你需要一個(gè)個(gè)復(fù)制，那我們懶得復(fù)制和搜索情況下，，可以采用下面修改鏈接形式
? ? https://completion.amazon.com/ ... b%3D1
? ? 采集結(jié)果顯示有10個(gè)與搜索的基本結(jié)果一致：
completion = ["iphone 7 c",["iphone 7 case","iphone 7 charger","iphone 7 case for girls","iphone 7 case otterbox","iphone 7 clear case","iphone 7 charger and headphone jack","iphone 7 case wallet","iphone 7 car charger","iphone 7 car mount","iphone 7 charger case"],[{"nodes":[{"name":"Electronics","alias":"electronics"},{"name":"Cell Phones & Accessories","alias":"mobile"}]},{},{},{},{},{},{},{},{},{}],,"193FH2Y38K88D"];String()
倒計(jì)時(shí)：
9 個(gè)回復(fù)
wangxiang
贊同來(lái)自: 你也是一朵蘑菇嗎 、 浩瀚--沐沐 、 Libgy 、 wjx498723877 、 Corneille 、 小美好 更多 ?