楼上说的很多，我(wo)补(bu)充一下，正(zheng)确的应该叫网络蜘蛛(zhu)，又称爬虫，本质是(shi)搜(sou)索引擎派出(chu)的一(yi)个执行(hang)抓取(qu)任(ren)务的程序蜘(zhi)蛛池的本(ben)质是大(da)量的网站互相(xiang)链接，每个站单独产(chan)生(sheng)大量(liang)的内容吸引蜘蛛来爬，几(ji)千个网站互(hu)链时，可(ke)以(yi)想(xiang)象蜘蛛的(de)链接(jie)