楼(lou)上说(shuo)的很(hen)多,我(wo)补充一(yi)下,正(zheng)确(que)的应该叫网络蜘(zhi)蛛(zhu),又称爬(pa)虫,本(ben)质是(shi)搜索引擎(qing)派出的一个执行(hang)抓取(qu)任务的程(cheng)序蜘蛛池的本质是大量(liang)的网站互相链接(jie),每个(ge)站单独产(chan)生大量的内容(rong)吸引蜘蛛来爬,几千个网(wang)站(zhan)互(hu)链时(shi),可以想象蜘(zhi)蛛的链接
Copyright © 2008-2018