楼上说的很(hen)多，我补充一(yi)下，正(zheng)确的应该叫(jiao)网(wang)络蜘蛛，又称爬虫，本(ben)质是搜索引擎派出的一个执(zhi)行抓取任(ren)务的(de)程(cheng)序蜘蛛池的本质是(shi)大量的(de)网站互(hu)相(xiang)链接，每(mei)个站单独(du)产生大量的内容吸引(yin)蜘蛛来爬(pa)，几(ji)千个(ge)网站互链时，可(ke)以(yi)想象蜘(zhi)蛛的链接(jie)