楼(lóu )上(shàng )说的很多,我(wǒ )补充(chōng )一下,正(zhèng )确的应(yīng )该叫网络(luò )蜘蛛(zhū ),又称爬虫,本质是搜索引擎(qíng )派出的一(yī )个(gè )执行抓取任务(wù )的程(chéng )序蜘(zhī )蛛池的本质是大量(liàng )的网站互相(xiàng )链(liàn )接,每(měi )个站单独(dú )产生大(dà )量的内容吸引(yǐn )蜘(zhī )蛛来(lái )爬(pá ),几千(qiān )个网站互链(liàn )时,可(kě )以(yǐ )想象(xiàng )蜘蛛的链接
Copyright © 2008-2018