楼上说的很(hěn )多(duō ),我(wǒ )补充一下(xià ),正确的应该叫网络蜘蛛,又称(chēng )爬虫,本质是搜索引(yǐn )擎派(pài )出的一个执行抓(zhuā )取任(rèn )务的(de )程(chéng )序(xù )蜘(zhī )蛛(zhū )池的(de )本质是(shì )大(dà )量的(de )网站互(hù )相(xiàng )链接(jiē ),每个(gè )站单独(dú )产生大量的(de )内容吸引蜘(zhī )蛛来爬,几千个(gè )网(wǎng )站(zhàn )互链(liàn )时,可以(yǐ )想象蜘蛛的链接
Copyright © 2008-2018