楼上(shang)说的(de)很(hen)多，我(wo)补充一下(xia)，正确的应该(gai)叫网络蜘蛛，又称爬虫(chong)，本(ben)质(zhi)是搜索引擎派出的一(yi)个执(zhi)行抓(zhua)取任务的程序蜘(zhi)蛛池(chi)的本(ben)质是大(da)量的网站互相链(lian)接(jie)，每个站(zhan)单独产生(sheng)大量的内容吸(xi)引蜘蛛来爬，几(ji)千个网站互(hu)链时，可以想(xiang)象蜘蛛的链(lian)接