楼上说的很(hěn )多,我补充一(yī )下(xià ),正确的(de )应该叫网(wǎng )络(luò )蜘蛛,又称爬(pá )虫,本(běn )质(zhì )是搜索(suǒ )引擎派出的一(yī )个执(zhí )行(háng )抓取(qǔ )任务(wù )的程序蜘(zhī )蛛池的本(běn )质是(shì )大量的网站互(hù )相(xiàng )链(liàn )接,每个站单(dān )独(dú )产生大量的内容(róng )吸引(yǐn )蜘蛛来爬,几千个网站互链(liàn )时,可(kě )以(yǐ )想象蜘蛛的链接(jiē )
Copyright © 2008-2018