楼上说的很多(duo),我补(bu)充一(yi)下,正确的(de)应(ying)该(gai)叫网(wang)络蜘蛛,又(you)称爬虫(chong),本质是搜索引擎派出的一(yi)个执(zhi)行(hang)抓(zhua)取任务(wu)的程序蜘蛛池的本(ben)质(zhi)是大量的网站互相(xiang)链(lian)接(jie),每个站单(dan)独产(chan)生大量的内(nei)容吸(xi)引蜘蛛来(lai)爬,几千(qian)个网站互(hu)链时,可以想象蜘蛛的链接
Copyright © 2008-2018