楼上(shang)说的很多,我补充一下,正(zheng)确的应该(gai)叫(jiao)网络蜘蛛,又称(cheng)爬虫(chong),本质(zhi)是搜索引(yin)擎派出(chu)的(de)一(yi)个执行(hang)抓取任务的(de)程序蜘蛛(zhu)池的本质是大(da)量的(de)网站互(hu)相(xiang)链接(jie),每个(ge)站单(dan)独(du)产生大量(liang)的内容吸(xi)引蜘蛛(zhu)来爬,几千个网站互链时,可以想象蜘蛛的链接(jie)
Copyright © 2008-2018