楼上说的很多(duo)，我补充一下，正确(que)的应该(gai)叫网(wang)络蜘蛛，又(you)称爬虫(chong)，本质是搜索引擎派出的一个执行抓取(qu)任(ren)务(wu)的程(cheng)序蜘蛛(zhu)池的本质是大量的网站互(hu)相链接，每个站(zhan)单独(du)产生大(da)量的内容吸引蜘蛛来爬(pa)，几(ji)千(qian)个(ge)网(wang)站互(hu)链时(shi)，可以(yi)想象蜘蛛(zhu)的链接