企业做网站分析网页路径

        分析网页路径是否有设置301重定向，有没有多条重复网页路径，有没有动态路径等，如网站同时支持静态和动态路径，如 Wordpress， DEDECMS之类的，可以通过 robots.twt搜索引弊协议文件来屏蔽掉动态路径。