楼上(shang)说的(de)很多，我补充一下，正确的应该叫网络蜘蛛(zhu)，又(you)称爬虫，本质(zhi)是搜(sou)索引(yin)擎派(pai)出的(de)一个(ge)执行抓取任务(wu)的(de)程(cheng)序蜘蛛池(chi)的本质是大量的网站互相链接，每个站单独产生(sheng)大量的(de)内容(rong)吸引蜘蛛(zhu)来爬，几千(qian)个网(wang)站(zhan)互(hu)链时，可以想象蜘(zhi)蛛的链接(jie)