楼上(shang)说(shuo)的很(hen)多,我补充一下(xia),正确的(de)应该(gai)叫网络(luo)蜘蛛,又称爬虫,本质是(shi)搜索引擎派出的一个执行抓取任(ren)务的(de)程序蜘蛛池的(de)本质是(shi)大(da)量(liang)的网站(zhan)互相链接,每个站单独产生(sheng)大量(liang)的内容吸引(yin)蜘(zhi)蛛来(lai)爬(pa),几千个网站互链(lian)时(shi),可以想象(xiang)蜘蛛的链接
Copyright © 2008-2018