楼上(shàng )说的(de )很(hěn )多(duō ),我补(bǔ )充(chōng )一(yī )下,正(zhèng )确的应该叫网络(luò )蜘蛛,又(yòu )称爬虫,本质(zhì )是搜(sōu )索引擎派出(chū )的一个执行(háng )抓取任(rèn )务的(de )程序蜘蛛(zhū )池的本质(zhì )是大量的网站互相链(liàn )接,每个站(zhàn )单(dān )独产(chǎn )生(shēng )大(dà )量的内容吸引蜘蛛来爬,几千个(gè )网站互链(liàn )时,可以(yǐ )想象(xiàng )蜘蛛的链(liàn )接(jiē )
Copyright © 2008-2018