1、根据log日志分析网站蜘蛛抓取痕迹,如下图所示:
2、蜘蛛设置如下图所示(用户可以添加、修改、删除蜘蛛):
3、分析文件,分析大文件时间需要较长,请耐心等候,如下图所示:
4、查看分析结果如下图所示: