楼上(shang)说(shuo)的很多(duo),我补充(chong)一下,正确的应该叫网(wang)络蜘蛛,又称(cheng)爬虫,本质是搜索引(yin)擎派出的一个执行(hang)抓取任务的(de)程(cheng)序蜘蛛(zhu)池的本质(zhi)是大量(liang)的网(wang)站(zhan)互相(xiang)链接,每个(ge)站单独产(chan)生大量(liang)的内(nei)容吸引(yin)蜘蛛来(lai)爬,几千个网站互链时(shi),可(ke)以想象蜘蛛(zhu)的(de)链接
Copyright © 2008-2018