楼上说的很多，我(wo)补充(chong)一下，正(zheng)确的应该叫网络蜘蛛，又称爬(pa)虫(chong)，本质是(shi)搜索引擎派(pai)出的(de)一个执(zhi)行抓取任务的程序蜘蛛池的本质是(shi)大(da)量(liang)的网站互(hu)相(xiang)链(lian)接，每个站单独产生大量的内容(rong)吸(xi)引蜘(zhi)蛛(zhu)来爬(pa)，几千个(ge)网(wang)站(zhan)互(hu)链(lian)时，可以(yi)想象蜘蛛的链接