楼上(shàng )说的很(hěn )多(duō ),我补(bǔ )充(chōng )一下(xià ),正确(què )的应(yīng )该叫网络蜘蛛,又称爬(pá )虫,本质是(shì )搜(sōu )索引擎派出的一个执行抓取任(rèn )务(wù )的程(chéng )序蜘(zhī )蛛(zhū )池的(de )本质(zhì )是大量的网站互相链(liàn )接(jiē ),每个站单独产(chǎn )生大(dà )量的内容吸引蜘蛛(zhū )来爬,几(jǐ )千个网(wǎng )站互链时,可以想象(xiàng )蜘蛛(zhū )的(de )链接
Copyright © 2008-2018