楼上(shang)说的很多,我(wo)补充一下(xia),正确的(de)应该(gai)叫网络(luo)蜘蛛,又称爬虫,本质是(shi)搜索引擎(qing)派(pai)出的一个执(zhi)行抓取任(ren)务(wu)的程序蜘蛛(zhu)池的(de)本质(zhi)是大量的网(wang)站互相(xiang)链接(jie),每(mei)个站单独产(chan)生大量的内(nei)容(rong)吸引蜘蛛来爬,几千(qian)个网(wang)站互链时,可以(yi)想象蜘蛛的(de)链接
Copyright © 2008-2018