企业网站建设对网站页面进行后台的获取、遍历

        在项目部署或者在设定的一段时间后，对网站页面进行后台的获取、遍历，通过配置文件设定的遍历深度开始对首页进行深度的链接获取以及转义，将各个链接对应的页面交给下一步处理，直到所有遍历结束。