楼(lóu )上说(shuō )的(de )很多,我补充(chōng )一下,正(zhèng )确的应该叫网络(luò )蜘(zhī )蛛,又(yòu )称爬(pá )虫,本质(zhì )是搜索引擎(qíng )派(pài )出(chū )的一个执行抓(zhuā )取(qǔ )任务的程序蜘蛛池的(de )本(běn )质是(shì )大量的网站(zhàn )互(hù )相链接,每个(gè )站(zhàn )单(dān )独(dú )产(chǎn )生大量(liàng )的内(nèi )容吸引蜘蛛来爬,几千个网站互(hù )链(liàn )时,可以想象蜘蛛的链接
Copyright © 2008-2018