楼上说的(de )很多(duō ),我(wǒ )补充一下,正(zhèng )确的应该叫网(wǎng )络蜘蛛,又称爬(pá )虫,本质是搜(sōu )索(suǒ )引擎(qíng )派(pài )出的(de )一个(gè )执行抓取任务的程序(xù )蜘蛛池(chí )的本质是(shì )大量的(de )网(wǎng )站互相链(liàn )接,每(měi )个站单独产(chǎn )生大量的(de )内容吸(xī )引蜘蛛来爬,几千个(gè )网站互(hù )链(liàn )时,可(kě )以(yǐ )想象(xiàng )蜘(zhī )蛛(zhū )的链接(jiē )
Copyright © 2008-2018