楼上(shàng )说的很多,我补充(chōng )一下(xià ),正确(què )的应该叫网络(luò )蜘蛛(zhū ),又称爬(pá )虫,本(běn )质是搜(sōu )索引擎派(pài )出的(de )一个执(zhí )行抓取任务的程(chéng )序蜘(zhī )蛛池的本质(zhì )是(shì )大量(liàng )的网站(zhàn )互(hù )相链接,每个站(zhàn )单独(dú )产生大量(liàng )的内(nèi )容(róng )吸引蜘蛛来(lái )爬,几千个网站(zhàn )互链时,可以(yǐ )想象(xiàng )蜘蛛(zhū )的链(liàn )接(jiē )
Copyright © 2008-2018