易購網(wǎng)比價商品數(shù)據(jù)如何抓??？
一起惠2016-06-08 09:16:42768 次
易購網(wǎng)商品數(shù)據(jù)抓取程序：
使用自主研發(fā)的數(shù)據(jù)抓取程序：WebPageTool；
對象：全球所有電子商務交易網(wǎng)站；
已收錄超過八百萬件商品；
單個網(wǎng)站抓取時間最長為20小時（40多萬件商品）。
網(wǎng)站收錄標準：
正規(guī)B2C網(wǎng)站；
頁面數(shù)據(jù)規(guī)范，商品信息豐富；
數(shù)據(jù)不低于2千條；
建議提供接口（確保完全收錄商家數(shù)據(jù)、減少網(wǎng)站抓取壓力、網(wǎng)站信息更新及時）見接口說明。
數(shù)據(jù)抓取：
自動程序只抓取商品相關信息，包括：商品名稱、描述、價格、分類、品牌、圖片、作者、出版社、點評等屬性；
分類覆蓋了圖書、化妝品、母嬰、手機數(shù)碼、家用電器、電腦產品、百貨幾個分類。
商品索引：
使用自主研發(fā)的數(shù)據(jù)抓取程序：WebPageTool；
對象：全球所有電子商務交易網(wǎng)站；
已收錄超過八百萬件商品；
單個網(wǎng)站抓取時間最長為20小時（40多萬件商品）。
網(wǎng)站收錄標準：
正規(guī)B2C網(wǎng)站；
頁面數(shù)據(jù)規(guī)范，商品信息豐富；
數(shù)據(jù)不低于2千條；
建議提供接口（確保完全收錄商家數(shù)據(jù)、減少網(wǎng)站抓取壓力、網(wǎng)站信息更新及時）見接口說明。
數(shù)據(jù)抓取：
自動程序只抓取商品相關信息，包括：商品名稱、描述、價格、分類、品牌、圖片、作者、出版社、點評等屬性；
分類覆蓋了圖書、化妝品、母嬰、手機數(shù)碼、家用電器、電腦產品、百貨幾個分類。
商品索引：
商品數(shù)據(jù)被抓取后進入易購后臺數(shù)據(jù)庫，每天進行數(shù)據(jù)庫重新整理和對商品的再次添加索引；商品排序。
聲明：本站部分信息來自互聯(lián)網(wǎng)，轉載的目的在于傳遞更多信息及用于網(wǎng)絡分享，并不代表本站贊同其觀點和對其真實性負責，也不構成任何其他建議。如果您發(fā)現(xiàn)網(wǎng)站上有侵犯您的知識產權的作品，請與我們取得聯(lián)系，我們會及時修改或刪除
