新闻动态分析网页路径

是否有设置301重定向，有没有多条重复网页路径，有没有动态路径等，如网站同时支持静态和动态路径，如WordPress、DeDeCMS之类的，可以通过robots.txt搜索引擎协议文件来屏蔽掉动态路径。