楼(lou)上说(shuo)的很(hen)多(duo)，我补充一下，正确(que)的应该叫(jiao)网络蜘蛛，又(you)称(cheng)爬虫，本(ben)质(zhi)是搜(sou)索引擎派(pai)出的一个(ge)执行抓取任务的程序蜘(zhi)蛛池的本质是(shi)大量的网站互相链(lian)接(jie)，每个站(zhan)单独(du)产(chan)生大量的(de)内容吸(xi)引蜘蛛来爬，几(ji)千个网站互链时，可以想象蜘(zhi)蛛的链接