楼上说的很(hen)多(duo)，我补充一(yi)下(xia)，正确的(de)应该叫网络蜘蛛，又称爬虫，本质是(shi)搜索引擎(qing)派出的一个执(zhi)行(hang)抓取任务的程序蜘蛛(zhu)池的本质是(shi)大量(liang)的网(wang)站互相(xiang)链(lian)接，每个(ge)站(zhan)单独(du)产生大量的(de)内容吸引蜘(zhi)蛛来爬，几千个网(wang)站互(hu)链时，可以想(xiang)象(xiang)蜘蛛的链接