楼上(shàng )说的很多,我补(bǔ )充一下,正(zhèng )确的应该叫(jiào )网(wǎng )络蜘蛛,又(yòu )称爬(pá )虫,本质是(shì )搜索引(yǐn )擎派出的一(yī )个执行抓(zhuā )取(qǔ )任务(wù )的(de )程序蜘蛛池的本质是大量的网(wǎng )站(zhàn )互(hù )相链接,每个站(zhàn )单独产生大量的内(nèi )容吸引(yǐn )蜘蛛来爬,几千(qiān )个网站(zhàn )互(hù )链时,可(kě )以想象蜘蛛(zhū )的(de )链接
Copyright © 2008-2018