楼(lóu )上说(shuō )的(de )很多,我(wǒ )补充(chōng )一下(xià ),正(zhèng )确的(de )应该(gāi )叫网络(luò )蜘蛛(zhū ),又(yòu )称爬虫,本质(zhì )是搜索引擎派(pài )出的一个执行抓取任务(wù )的程(chéng )序蜘蛛池(chí )的(de )本质(zhì )是(shì )大量的网站互相(xiàng )链接,每个站单独产生大量的(de )内(nèi )容吸引(yǐn )蜘蛛来爬,几(jǐ )千个网(wǎng )站互链时(shí ),可(kě )以想象(xiàng )蜘蛛(zhū )的链接
Copyright © 2008-2018