楼(lou)上说(shuo)的很多,我(wo)补(bu)充一下,正确的应该叫网(wang)络蜘蛛,又(you)称爬(pa)虫,本质是搜索引擎(qing)派出(chu)的一个(ge)执(zhi)行抓取(qu)任务的(de)程序蜘蛛池的(de)本质是大(da)量(liang)的网站互相链接(jie),每个站单独产生(sheng)大量的内容吸引蜘(zhi)蛛来(lai)爬,几(ji)千个网站互链(lian)时(shi),可以想(xiang)象蜘蛛的(de)链接
Copyright © 2008-2018