楼(lóu )上说(shuō )的(de )很多,我(wǒ )补(bǔ )充一下(xià ),正(zhèng )确(què )的(de )应(yīng )该叫(jiào )网络(luò )蜘蛛,又(yòu )称爬(pá )虫(chóng ),本质是搜索引(yǐn )擎派出的一个执行(háng )抓取任(rèn )务的(de )程序蜘蛛池的(de )本质是大量的网(wǎng )站互相(xiàng )链接,每个(gè )站(zhàn )单独(dú )产(chǎn )生大量(liàng )的内容(róng )吸引蜘蛛来(lái )爬,几千个网站互链时(shí ),可以想象蜘蛛的链接
Copyright © 2008-2018