楼(lou)上说(shuo)的很多,我补充一下,正确的应该(gai)叫(jiao)网络蜘(zhi)蛛,又(you)称爬虫,本质是搜索引(yin)擎(qing)派(pai)出的一个执行抓取任务的程序蜘蛛池的本质是大量(liang)的网站(zhan)互相链接(jie),每个站单独(du)产(chan)生大(da)量的内(nei)容(rong)吸引(yin)蜘蛛(zhu)来(lai)爬(pa),几千个(ge)网(wang)站互(hu)链时,可以想象蜘蛛(zhu)的链接
Copyright © 2008-2018