楼(lou)上说的很多,我(wo)补充一下,正(zheng)确(que)的应该叫网(wang)络(luo)蜘蛛(zhu),又称爬虫,本质是搜索(suo)引(yin)擎(qing)派出的一(yi)个(ge)执行抓取(qu)任务的(de)程序蜘蛛池的(de)本质是大量的网站互相链接(jie),每个站单(dan)独产生大量的内(nei)容(rong)吸引(yin)蜘蛛来爬,几(ji)千个网(wang)站互链(lian)时(shi),可(ke)以想象蜘蛛的(de)链接
Copyright © 2008-2018