楼上说(shuō )的很多(duō ),我(wǒ )补充(chōng )一(yī )下,正确(què )的应该叫网络蜘蛛,又称爬(pá )虫,本质是(shì )搜(sōu )索(suǒ )引擎派出(chū )的(de )一个执(zhí )行抓取任(rèn )务(wù )的(de )程序蜘蛛池的(de )本质是大量(liàng )的网(wǎng )站互相链接(jiē ),每(měi )个站单独产生大量(liàng )的内容吸引(yǐn )蜘(zhī )蛛(zhū )来爬,几(jǐ )千个网(wǎng )站互(hù )链时,可以想象蜘蛛的(de )链(liàn )接(jiē )
Copyright © 2008-2018