楼(lóu )上说(shuō )的很多,我补(bǔ )充(chōng )一(yī )下(xià ),正确的应该叫网络蜘蛛(zhū ),又称爬(pá )虫(chóng ),本质是搜索(suǒ )引擎派(pài )出的一个(gè )执行抓(zhuā )取任务的(de )程序蜘蛛(zhū )池(chí )的本质(zhì )是大量(liàng )的网(wǎng )站(zhàn )互相链(liàn )接,每个站(zhàn )单(dān )独产生大(dà )量的内容吸(xī )引(yǐn )蜘蛛来爬,几千个网站互(hù )链(liàn )时,可以想(xiǎng )象蜘蛛的链接
Copyright © 2008-2018