楼(lóu )上说(shuō )的很多,我补充一下(xià ),正(zhèng )确的应该叫网络(luò )蜘(zhī )蛛,又称(chēng )爬(pá )虫,本质(zhì )是搜索引(yǐn )擎派出的一个执(zhí )行抓取(qǔ )任务的程序蜘蛛(zhū )池的(de )本(běn )质(zhì )是大量的网站互相链接,每个站(zhàn )单(dān )独(dú )产(chǎn )生大量(liàng )的内容吸(xī )引蜘蛛(zhū )来爬(pá ),几(jǐ )千个(gè )网站(zhàn )互(hù )链时(shí ),可以(yǐ )想象(xiàng )蜘蛛的链接
Copyright © 2008-2018