電商評論采集器

軟件介紹

天線貓軟件出品的各大電商購物網(wǎng)站的評論采集工具。

整合6家最大購物網(wǎng)站（淘寶、天貓、京東、一號店、當(dāng)當(dāng)網(wǎng)、蘇寧易購）的商品評論采集，更多購物網(wǎng)站后續(xù)考慮加入。

可以自由引用評論內(nèi)容、評論用戶名（匿名不能采）、評論時間、評論用戶等級和ID等信息，還可以智能引用評論中的更多擴(kuò)展屬性。已經(jīng)自動去除重復(fù)評論。

每個商品地址采集量說明（2016-08-20）：

淘寶和天貓能采集100頁評論（驗(yàn)證碼增多，不過最新版本有新辦法可以無視驗(yàn)證碼）。

京東能采集幾百到幾千條評論。

一號店能采集8-35頁左右（偶爾有驗(yàn)證碼）。

當(dāng)當(dāng)網(wǎng)可以采集全部評論。

蘇寧易購能采集50頁左右。

淘寶或天貓可能會出現(xiàn)：

登錄只一次，登錄完了頁面一般會空白，直接關(guān)閉窗口即可繼續(xù)采集

驗(yàn)證碼每次輸入驗(yàn)證碼后需讓軟件自動等待一定時間比如15分鐘，軟件有倒計(jì)時，到時間會自動關(guān)閉窗口繼續(xù)采集

關(guān)于曬圖：

即使保存模板沒有引用#曬圖#，只要打勾【采集時下載到本地】選項(xiàng)，曬圖也會下載到保存目錄下的子目錄中。

而打勾【采集多張曬圖】，就能返回某個評論的多張圖片，否則只返回一張圖片。

而保存模板里引用#曬圖#時保存的是圖片地址，多張圖片地址一行一個。

Excel導(dǎo)出

csv是一種文本表格，能被Excel兼容顯示為多列多行的數(shù)據(jù)。

只要在保存模板中設(shè)置為："#評論#","#時間#","#昵稱#"，這種格式就是csv格式，使用引號圍住每個項(xiàng)目，多個項(xiàng)目使用逗號隔開，然后保存擴(kuò)展名填為csv即可

組件說明

一行一個的商品地址。如果放的地址為本地文件路徑，將讀入該文件內(nèi)容中的商品地址。支持拖放本地文件到地址列表。淘寶和天貓支持直接使用商品ID進(jìn)行采集。

不彈出驗(yàn)證窗口遇到需要登錄或驗(yàn)證碼時，軟件默認(rèn)會彈出瀏覽器窗口讓用戶手動處理；但是經(jīng)過天線貓測試，有時不必彈出窗口，由程序內(nèi)部自動處理即可自動繼續(xù)采集。如果內(nèi)部自動處理采集不了，請取消打勾本選項(xiàng)改為用戶手動處理。

保存模板可以引用評論內(nèi)容、評論的用戶名等信息，自由組合。

每頁延秒如果大量高速采集可能會被限制，可根據(jù)情況設(shè)定每采集一頁等待的秒數(shù)。通常情況可設(shè)置為0，就是不等待。

采集頁數(shù)設(shè)置為0自動采集全部頁評論，否則僅采集指定頁數(shù)的評論。

每文件幾個評論就是每幾個評論保存為一個文件。設(shè)置為0則每個商品的全部評論保存為一個文件。

保存目錄右擊“..”按鈕可以在“我的電腦”里打開該目錄。

開始采集右擊“開始采集”按鈕可預(yù)覽一頁評論，左擊則是正式采集并保存到文件。

1.0.0.0：首個版本發(fā)布于2014-11-06深夜3點(diǎn)半

1.0.0.1：最新2014年11月8日測試發(fā)現(xiàn)京東比較容易采集失敗，本次更新特別加強(qiáng)嘗試次數(shù)。

1.0.1.0：當(dāng)使用過濾評論時相應(yīng)提高采集空次數(shù)，避免采集頁不足；其他更新。

1.0.2.0：修復(fù)淘寶店鋪采集商品地址失效的問題；增加保存命名選項(xiàng)（商品標(biāo)題、商品ID、內(nèi)容隨機(jī)改名）

1.0.3.0：修復(fù)部分特殊型號詞無法采集采集淘寶商品地址的問題。

1.0.3.1：增加采集失敗時調(diào)試顯示相關(guān)信息。

1.0.4.0：根據(jù)最新淘寶變動修復(fù)相關(guān)項(xiàng)；試用版限制預(yù)覽一頁。

1.0.5.0：修正使用過濾設(shè)置后可能導(dǎo)致提前結(jié)束采集的問題；修改試用版提示文字。

1.0.5.1：嘗試修復(fù)部分電腦取硬盤碼失敗的問題。

1.0.6.0：修復(fù)淘寶天貓改動導(dǎo)致采集店鋪id失敗的問題

1.0.7.0：修復(fù)部分店鋪不能采集id的問題。

1.1.0.0：修復(fù)淘寶改動導(dǎo)致淘寶和天貓?jiān)u論采集失敗問題，并支持https鏈接。

1.1.1.0：修復(fù)淘寶改動導(dǎo)致采集評論失敗問題。

1.1.2.0：修復(fù)淘寶改動導(dǎo)致采集評論失敗問題（增加手動登錄/輸入驗(yàn)證碼窗口）。

1.2.0.0：更換數(shù)據(jù)解析模式并修復(fù)京東數(shù)據(jù)部分情況解析不完全問題；補(bǔ)上曬圖鏈接缺少的http:，并支持返回同一個評論的多條曬圖。

1.2.0.1：修改登錄窗口的說明名字，提示需要登錄淘寶。

1.2.1.0：修復(fù)淘寶改動采集失敗問題；修改多個曬圖鏈接一行一個。

1.2.2.0：淘寶改動驗(yàn)證碼輸入無效必須等待10分鐘再輸入方才有效，故修改信息框提示；禁止瀏覽器本身可能彈出的提示框；修改讀取網(wǎng)頁的一些細(xì)節(jié)。

1.2.3.0：增加商品地址采集器的采集前登錄。

1.2.5.0：修復(fù)商品地址采集器-關(guān)鍵詞采集-京東失敗問題。

1.3.0.0：新增 保存模板 的可引用項(xiàng)目3個，#店鋪名#、#店鋪地址#、#商品地址#。

1.3.5.0：新增淘寶登錄或驗(yàn)證碼的10分鐘自動等待繼續(xù)，并測試發(fā)現(xiàn)最近（2016年2月17日）淘寶已經(jīng)放松了（連續(xù)采集幾百頁、一千頁甚至更多都不會彈出驗(yàn)證碼）；商品地址采集器也新增支持登錄或驗(yàn)證的自動彈出，并新增支持品牌詞采集；鑒于淘寶對采集速度沒什么限制，故將每頁延時秒的默認(rèn)值設(shè)置為0以提高速度。

1.3.6.0：商品地址采集器的店鋪采集新增支持與淘寶掛鉤的淘寶之外域名的店鋪采集；補(bǔ)充檢測天貓驗(yàn)證的部分代碼；上一個版本你發(fā)現(xiàn)的淘寶放松，現(xiàn)在又嚴(yán)格了。

1.3.9.0：新增曬圖可選返回多張圖片或單張圖片選項(xiàng)，并增加曬圖的下載選項(xiàng)（自動下載到保存目錄下的以商品ID命名的目錄里面）

1.3.10.0：修復(fù)京東關(guān)鍵詞采集商品地址失敗問題

1.5.0.0：新增一號店、當(dāng)當(dāng)網(wǎng)、蘇寧易購的評論采集；追加評論改為使用空格隔開而不是||隔開；商品地址采集器同步更新；其他更新。

1.5.1.0：修復(fù)因淘寶限制無法在XP系統(tǒng)上采集淘寶的問題（也就是現(xiàn)在可以xp采集了）；2016年8月11日發(fā)現(xiàn)的新辦法可以讓天貓不用登錄和輸驗(yàn)證碼也能自動繼續(xù)采集；加強(qiáng)當(dāng)當(dāng)采集邏輯；改善京東無數(shù)據(jù)時采集速度；其他更新

1.5.2.0：升級淘寶與天貓數(shù)據(jù)同源（原本只有天貓可以繞過驗(yàn)證碼，現(xiàn)在這樣淘寶也能繞過驗(yàn)證碼問題了，當(dāng)然未來還可能會變）；新增淘寶天貓的在線打碼設(shè)置

1.5.3.0：修復(fù)蘇寧采集失敗問題

1.5.3.5：保存模板新增 #商品地址# 引用；新增命名方式：商品標(biāo)題@#@#商品id

1.5.5.0：修復(fù)最新天貓改動導(dǎo)致采集有時不完整的問題；修復(fù)個別天貓地址獲取id錯誤導(dǎo)致采集失敗的問題

1.5.6.0：修復(fù)京東改動導(dǎo)致關(guān)鍵詞采集和店鋪采集京東地址失敗的問題

1.5.7.0：修復(fù)淘寶改動導(dǎo)致無法采集地址的問題（但也無法采集全部了）