楼上说的(de )很(hěn )多,我补充一下(xià ),正(zhèng )确(què )的应该(gāi )叫(jiào )网(wǎng )络蜘蛛,又称爬虫,本(běn )质是搜索引擎(qíng )派(pài )出的一个执行抓取任务的(de )程(chéng )序(xù )蜘(zhī )蛛池的本质是大量的(de )网站互(hù )相链接(jiē ),每(měi )个站(zhàn )单独产(chǎn )生大(dà )量的内容(róng )吸(xī )引蜘蛛来(lái )爬,几(jǐ )千个(gè )网站互链时,可以(yǐ )想象蜘蛛的链接(jiē )
Copyright © 2008-2018