紅葉文章采集器是一款非常實(shí)用、非常便捷、非常受歡迎、且軟件小巧、綠色的電腦類應(yīng)用工具軟件。歡迎有興趣的朋友前來(lái)jz5u下載使用！

(1)本軟件采用北大天網(wǎng)MD5指紋排重算法，對(duì)于相似相同的網(wǎng)頁(yè)信息，不再重復(fù)保存。

(2)采集信息含義：[[HT]]表示網(wǎng)頁(yè)標(biāo)題，[[HA]]表示文章標(biāo)題，[[HC]]表示10個(gè)權(quán)重關(guān)鍵字，[[UR]]表示網(wǎng)頁(yè)中的圖片鏈接，[[TXT]]之后為正文。

(3)蜘蛛性能：本軟件開啟300個(gè)線程來(lái)保證采集效率。通過(guò)采集100萬(wàn)精華文章來(lái)執(zhí)行壓力測(cè)試，以普通網(wǎng)民的聯(lián)網(wǎng)計(jì)算機(jī)為參考標(biāo)準(zhǔn)，單臺(tái)計(jì)算機(jī)可以在一天內(nèi)遍歷200萬(wàn)網(wǎng)頁(yè)、采集20萬(wàn)精華文章，100萬(wàn)精華文章僅需5天就可采集完畢。

(4) 正式版與版的區(qū)別在于：正式版允許將采集的精華文章數(shù)據(jù)自動(dòng)保存為ACCESS數(shù)據(jù)庫(kù)。購(gòu)買正式版請(qǐng)聯(lián)系QQ(970093569)。

操作方法

(1)使用前，必須確保你的計(jì)算機(jī)可以連通網(wǎng)絡(luò)，且防火墻不要攔截本軟件。

(2)運(yùn)行SETUP.EXE和setup2.exe，以安裝操作系統(tǒng)system32支持庫(kù)。

(3)運(yùn)行spider.exe，輸入網(wǎng)址，先點(diǎn)"人工添加"按鈕，再點(diǎn)"啟動(dòng)"按鈕，將開始執(zhí)行采集。

注意事項(xiàng)

(1)抓取深度：填寫0表示不限制抓取深度;填寫3表示抓到第3層。

(2)通用蜘蛛模式與分類蜘蛛模式的區(qū)別：假定網(wǎng)址為http://youxi.baidu.com/，若選擇通用蜘蛛模式，將遍歷baidu.com里面的每一個(gè)網(wǎng)頁(yè);若選擇分類蜘蛛模式，則只遍歷youxi.baidu.com里面的每一個(gè)網(wǎng)頁(yè)。

(3) 按鈕從MDB導(dǎo)入：網(wǎng)址從TASK.MDB中批量導(dǎo)入。

(4)本軟件采集的原則是不越站，例如給的是http://youxi.baidu.com/，就只在百度站點(diǎn)內(nèi)部抓取。

(5)本軟件采集過(guò)程中，偶爾會(huì)彈出一個(gè)或數(shù)個(gè)錯(cuò)誤對(duì)話框，請(qǐng)不予理會(huì)，倘若關(guān)閉錯(cuò)誤對(duì)話框，采集軟件就會(huì)掛掉。

(6)使用者如何選擇采集題材：例如你若想采集 股票類文章，只需把那些股票類站點(diǎn)作為網(wǎng)址即可。