楼(lou)上说的很多，我(wo)补(bu)充一下(xia)，正确的应该叫网络蜘蛛(zhu)，又称爬(pa)虫，本质(zhi)是搜索引擎(qing)派出的一个执行(hang)抓取(qu)任务的(de)程序蜘蛛池的(de)本质(zhi)是大量的网站互相(xiang)链(lian)接，每(mei)个站(zhan)单独产生(sheng)大量的(de)内容(rong)吸引(yin)蜘蛛来爬，几(ji)千个网站互链时，可(ke)以想象蜘(zhi)蛛的链接