楼上说的很多,我(wǒ )补(bǔ )充(chōng )一(yī )下,正(zhèng )确(què )的应该(gāi )叫网络(luò )蜘(zhī )蛛,又(yòu )称爬(pá )虫,本质(zhì )是搜索(suǒ )引擎(qíng )派出的一(yī )个执(zhí )行抓取任务(wù )的程序(xù )蜘(zhī )蛛池的本质是(shì )大量的网站互相(xiàng )链接,每个(gè )站(zhàn )单(dān )独产生大(dà )量的(de )内容吸引蜘蛛来爬,几千个网站(zhàn )互(hù )链(liàn )时,可以想象蜘蛛(zhū )的(de )链接(jiē )
Copyright © 2008-2018