楼上说的很多，我(wo)补(bu)充一下，正确的应(ying)该叫(jiao)网络蜘蛛，又(you)称(cheng)爬(pa)虫(chong)，本(ben)质是搜索引(yin)擎派出(chu)的一(yi)个(ge)执行抓取任务(wu)的(de)程(cheng)序蜘(zhi)蛛池的本质(zhi)是大量的网(wang)站(zhan)互相(xiang)链接，每个站单独产生(sheng)大量的内容吸引(yin)蜘蛛来爬(pa)，几千个网站互链时，可以想象蜘蛛的链接