楼(lou)上说(shuo)的很(hen)多,我补充一下,正(zheng)确的应该叫网络蜘蛛,又称爬(pa)虫,本(ben)质是搜(sou)索引擎派出(chu)的(de)一个执行(hang)抓取(qu)任(ren)务(wu)的程序(xu)蜘蛛(zhu)池的本质是大(da)量(liang)的网站互(hu)相链接(jie),每个站(zhan)单独产(chan)生(sheng)大量的内容吸引蜘蛛来(lai)爬,几千个网站互链时,可(ke)以想(xiang)象蜘蛛的链接
Copyright © 2008-2018