楼上说的很多(duo),我补充(chong)一下,正确(que)的应该叫网(wang)络蜘蛛,又(you)称爬虫,本质是搜索引擎派出(chu)的一个执(zhi)行抓取任务的程序蜘蛛(zhu)池(chi)的本(ben)质是大量(liang)的网站互相链接(jie),每(mei)个站单(dan)独产(chan)生大量的内(nei)容(rong)吸引蜘(zhi)蛛(zhu)来(lai)爬,几千个网站互(hu)链(lian)时(shi),可以想象蜘蛛(zhu)的(de)链接
Copyright © 2008-2018