楼(lou)上说的很多，我(wo)补充一下，正(zheng)确(que)的应该叫网络蜘(zhi)蛛，又称(cheng)爬(pa)虫，本质(zhi)是搜索引(yin)擎派出的一个(ge)执行抓取任(ren)务(wu)的(de)程序蜘蛛池的(de)本质是大(da)量的(de)网站互(hu)相(xiang)链接，每个站(zhan)单独(du)产生大量的(de)内容吸引蜘蛛来(lai)爬，几(ji)千个(ge)网站互链时，可(ke)以想象蜘蛛的链接