楼上说的很多(duō ),我(wǒ )补充一(yī )下,正确(què )的应该叫(jiào )网络(luò )蜘(zhī )蛛,又称爬(pá )虫,本(běn )质是搜索(suǒ )引(yǐn )擎派出的一(yī )个执(zhí )行抓取任(rèn )务的程(chéng )序蜘蛛池的本质是(shì )大量的(de )网(wǎng )站互相链(liàn )接(jiē ),每个(gè )站单独产生大(dà )量的内(nèi )容吸(xī )引蜘蛛(zhū )来爬,几(jǐ )千个网站(zhàn )互链(liàn )时(shí ),可以想象蜘蛛的链接(jiē )
Copyright © 2008-2018