楼上说的很多,我(wo)补充(chong)一(yi)下(xia),正确的(de)应该叫(jiao)网络蜘(zhi)蛛,又称(cheng)爬虫(chong),本质是搜索引擎(qing)派(pai)出的一(yi)个执(zhi)行(hang)抓(zhua)取任务的(de)程序蜘蛛池(chi)的本质是大量(liang)的(de)网(wang)站互相链接,每个站单独产生(sheng)大量(liang)的(de)内容(rong)吸引蜘蛛来爬,几千个网站互链时,可以想(xiang)象蜘(zhi)蛛的链接
Copyright © 2008-2018