楼上说的很多(duō ),我补充一(yī )下,正确(què )的应该叫网络(luò )蜘蛛(zhū ),又(yòu )称爬虫,本(běn )质是(shì )搜索引擎(qíng )派(pài )出的一(yī )个执行抓(zhuā )取(qǔ )任务的程序(xù )蜘蛛池的本质是(shì )大量的(de )网(wǎng )站(zhàn )互相链接(jiē ),每个站(zhàn )单独产生(shēng )大(dà )量的内容吸引(yǐn )蜘(zhī )蛛(zhū )来爬,几千个网站互链(liàn )时,可以想象(xiàng )蜘(zhī )蛛的链(liàn )接(jiē )
Copyright © 2008-2018