楼(lou)上说(shuo)的(de)很(hen)多，我补充一下，正确(que)的应该叫网络蜘(zhi)蛛(zhu)，又(you)称爬(pa)虫，本质是(shi)搜索引擎派(pai)出的(de)一个(ge)执(zhi)行抓(zhua)取任务的程序蜘蛛(zhu)池的本质是大量的网站互相链(lian)接，每个(ge)站(zhan)单独产生大(da)量的内容吸引蜘(zhi)蛛来爬，几千个(ge)网(wang)站互链时(shi)，可以想象蜘蛛(zhu)的链接