楼(lóu )上(shàng )说的很多,我(wǒ )补充一下,正确(què )的(de )应该叫网(wǎng )络(luò )蜘蛛,又称爬(pá )虫(chóng ),本质(zhì )是搜索引(yǐn )擎派出的(de )一个执行抓取(qǔ )任务的程(chéng )序蜘蛛池的本质是(shì )大量的网(wǎng )站互相(xiàng )链(liàn )接(jiē ),每个站(zhàn )单独(dú )产(chǎn )生大(dà )量(liàng )的内容吸引蜘蛛来爬(pá ),几千(qiān )个(gè )网站互(hù )链时,可以想象蜘蛛的链(liàn )接(jiē )
Copyright © 2008-2018