楼(lóu )上(shàng )说的很多,我补充一下,正确的应该叫网(wǎng )络(luò )蜘蛛,又称(chēng )爬虫(chóng ),本质是搜索引(yǐn )擎派出的(de )一(yī )个执行抓取任务的(de )程序蜘蛛池的本质是大(dà )量的网站(zhàn )互相(xiàng )链(liàn )接,每(měi )个(gè )站单(dān )独(dú )产(chǎn )生大量(liàng )的内(nèi )容吸引蜘蛛来爬,几(jǐ )千个网站互(hù )链时(shí ),可(kě )以想象(xiàng )蜘(zhī )蛛(zhū )的链接
Copyright © 2008-2018