楼上说的很多(duo),我补充一下,正(zheng)确的应该叫网络蜘蛛,又(you)称爬虫,本(ben)质是搜(sou)索引(yin)擎派出(chu)的一(yi)个执行抓(zhua)取(qu)任务的(de)程序(xu)蜘(zhi)蛛池的本(ben)质是大量的网站(zhan)互(hu)相链接,每个站单独产(chan)生(sheng)大量(liang)的内(nei)容吸(xi)引蜘(zhi)蛛来爬,几(ji)千个网(wang)站互链时,可以想象蜘(zhi)蛛的链接(jie)
Copyright © 2008-2018