企業(yè)建網(wǎng)站網(wǎng)絡(luò)爬蟲(chóng)的分類(lèi)
日期 : 2020-11-08 10:17:21
網(wǎng)絡(luò)爬蟲(chóng)的分類(lèi)。
網(wǎng)絡(luò)爬蟲(chóng)按照實(shí)現(xiàn)的技術(shù)主要分為通用網(wǎng)絡(luò)爬蟲(chóng)(general purpose web crawler)和主題網(wǎng)絡(luò)爬蟲(chóng)(topical crawler)。
在這兩類(lèi)爬蟲(chóng)基礎(chǔ)上進(jìn)行細(xì)化和深入分析,又可以進(jìn)一步實(shí)現(xiàn)增量式網(wǎng)絡(luò)爬蟲(chóng)、深層網(wǎng)絡(luò)爬蟲(chóng)等依據(jù)具體需求生成的爬蟲(chóng)類(lèi)型。
網(wǎng)絡(luò)爬蟲(chóng)按照實(shí)現(xiàn)的技術(shù)主要分為通用網(wǎng)絡(luò)爬蟲(chóng)(general purpose web crawler)和主題網(wǎng)絡(luò)爬蟲(chóng)(topical crawler)。
在這兩類(lèi)爬蟲(chóng)基礎(chǔ)上進(jìn)行細(xì)化和深入分析,又可以進(jìn)一步實(shí)現(xiàn)增量式網(wǎng)絡(luò)爬蟲(chóng)、深層網(wǎng)絡(luò)爬蟲(chóng)等依據(jù)具體需求生成的爬蟲(chóng)類(lèi)型。