楼上(shàng )说的(de )很(hěn )多,我补(bǔ )充一(yī )下,正确的(de )应该叫网络蜘蛛,又(yòu )称爬虫,本质是搜索引擎(qíng )派出的(de )一(yī )个执行抓取(qǔ )任(rèn )务的程序(xù )蜘蛛池(chí )的本质是大量(liàng )的(de )网站(zhàn )互相链接,每(měi )个站(zhàn )单独(dú )产生(shēng )大(dà )量的内容吸引(yǐn )蜘蛛来爬,几千个网(wǎng )站互(hù )链(liàn )时,可(kě )以想象蜘蛛(zhū )的链接
Copyright © 2008-2018