楼上说的很多，我补充一下(xia)，正(zheng)确(que)的应该叫网(wang)络蜘(zhi)蛛，又称(cheng)爬虫，本质是搜(sou)索引擎(qing)派出(chu)的一个执行(hang)抓取任(ren)务的程序蜘(zhi)蛛池的(de)本(ben)质是大量(liang)的(de)网站互相链接，每个站单(dan)独(du)产生大量的内容吸引蜘(zhi)蛛(zhu)来爬，几千个网站互链时，可以想(xiang)象(xiang)蜘蛛(zhu)的链(lian)接(jie)