楼上说的很多(duo)，我补充(chong)一(yi)下，正确的应该叫网络(luo)蜘蛛(zhu)，又称爬虫，本质是搜索(suo)引擎派出的(de)一个执行(hang)抓取任(ren)务(wu)的程序蜘(zhi)蛛池的(de)本质是大量的网站(zhan)互相(xiang)链接，每个站单独(du)产生大(da)量的内容吸引蜘蛛来(lai)爬，几千个网(wang)站互链时(shi)，可(ke)以想象蜘(zhi)蛛的链接(jie)