楼上说的很多(duō ),我(wǒ )补充一下,正(zhèng )确的(de )应该叫网络(luò )蜘(zhī )蛛,又称爬虫,本(běn )质是搜索引(yǐn )擎(qíng )派出(chū )的(de )一(yī )个(gè )执(zhí )行抓取任(rèn )务(wù )的程序蜘蛛池的本质是大量(liàng )的网(wǎng )站互(hù )相链接,每个站单独(dú )产生大量的内容吸引蜘(zhī )蛛来爬(pá ),几(jǐ )千个网(wǎng )站(zhàn )互链时,可(kě )以想象(xiàng )蜘(zhī )蛛(zhū )的链接(jiē )
Copyright © 2008-2018