楼上说的(de)很多,我(wo)补(bu)充(chong)一下,正(zheng)确的应该叫(jiao)网(wang)络(luo)蜘蛛(zhu),又称爬虫,本质是搜索(suo)引(yin)擎派出(chu)的一(yi)个执(zhi)行抓取任务的程序(xu)蜘蛛池的本(ben)质(zhi)是大量的网(wang)站互相链接(jie),每个站单独产生大量的内容吸引蜘蛛来爬(pa),几千个网站互链时,可以想(xiang)象(xiang)蜘(zhi)蛛(zhu)的链接(jie)
Copyright © 2008-2018