蜘蛛池是什么？
蜘蛛池是由几十、几百个域名组成的庞大站群系统，每个域名都会生成无限个二级域名、无限个二级目录以及无限个内页，从而生成一个互联互通的、迷宫似的网络结构站群。 当一个蜘蛛从某一个域名进入蜘蛛池后，会对蜘蛛池迷宫式页面进行无限爬取，从而困住蜘蛛。一段时间后蜘蛛会越来越多。当蜘蛛达到一定量后程序会把我们要收录的url反馈给蜘蛛，作为出口，引导蜘蛛池内大量蜘蛛去爬取这个url，从而达到快速收录的效果。