楼上说(shuō )的(de )很多,我补(bǔ )充一下,正(zhèng )确(què )的(de )应该(gāi )叫网络蜘(zhī )蛛,又称爬(pá )虫,本质是(shì )搜(sōu )索(suǒ )引(yǐn )擎派出的(de )一个执(zhí )行抓取任务的程序(xù )蜘(zhī )蛛池的本质是大(dà )量的(de )网站互(hù )相链接(jiē ),每(měi )个站(zhàn )单(dān )独产(chǎn )生(shēng )大量(liàng )的内(nèi )容吸引蜘蛛来爬,几千(qiān )个网站互(hù )链时,可以想象(xiàng )蜘蛛的链接(jiē )
Copyright © 2008-2018