楼上说的(de)很多，我(wo)补(bu)充一下，正(zheng)确(que)的(de)应该(gai)叫网(wang)络(luo)蜘(zhi)蛛，又称爬虫(chong)，本质(zhi)是(shi)搜索引擎派出的一个执行抓取任务的程序蜘蛛池的本质是大量的网(wang)站互(hu)相链接(jie)，每(mei)个(ge)站(zhan)单独产生大量的(de)内容吸引蜘(zhi)蛛来爬，几(ji)千个网站互链(lian)时，可以(yi)想象蜘(zhi)蛛的(de)链接