楼上说的很多，我(wo)补(bu)充一下，正(zheng)确的(de)应该(gai)叫网络蜘(zhi)蛛，又称爬虫，本质(zhi)是搜索引擎(qing)派出(chu)的(de)一(yi)个执行(hang)抓取(qu)任务的(de)程序蜘(zhi)蛛池的(de)本质是大量(liang)的网(wang)站互相链接，每个站单独产生大量的内容吸引(yin)蜘蛛(zhu)来(lai)爬(pa)，几千个网站互链时，可以想象蜘(zhi)蛛的(de)链(lian)接