楼上(shang)说(shuo)的很多,我补充一下,正确的应该叫(jiao)网络蜘(zhi)蛛(zhu),又(you)称(cheng)爬(pa)虫(chong),本质是搜索引擎派出的一个执行抓取(qu)任(ren)务(wu)的(de)程序(xu)蜘蛛(zhu)池的本(ben)质是(shi)大量(liang)的网站互相链接,每个站单(dan)独产(chan)生大量的(de)内容吸引(yin)蜘蛛来爬,几千个网站互(hu)链(lian)时,可以想象蜘蛛的(de)链接
Copyright © 2008-2018