文章目录
1 插件功能1.1 蜘蛛概况1.2 蜘蛛日志1.3 蜘蛛列表1.4 访问路径1.5 热门文章1.6 插件设置
刚建站的小伙伴尤其在意蜘蛛的抓取频率，至少我是这样，每天都要查看网站日志，看蜘蛛来了多少次。想要增加网站收录，抓取是前提，虽然百度搜索资源平台也可以查看，但是第二天才能更新，有时候几天都不更新一次，可以通过工具分析网站日志，之前扬帆号也分享过，但每次都要下载日志文件，还是比较麻烦的，今天分享一个WordPress插件，Spider Analyser。
Spider Analyser是一款用于跟踪WordPress网站各种搜索引擎蜘蛛爬行日志，并进行详细的蜘蛛爬行数据统计、蜘蛛行为分析、蜘蛛爬取分析及伪蜘蛛拦截等。
插件功能蜘蛛概况
支持查看网站日常各大搜索引擎蜘蛛来访的数据；
今日蜘蛛-方便站长快速了解当日、昨日及30天平均的来访蜘蛛数、爬取URL数及平均爬取URL数。趋势图-支持按今天、昨天、最近7天及最近30天查看蜘蛛数、爬取URLs总量及爬取URLs均值走势折线图，并可查看上一周期数据，以作对比分析。Top10蜘蛛-支持按今天、昨天、最近7天及最近30天查看Top10蜘蛛的爬取URL数及占比相关数据。Top10蜘蛛爬取URL-支持按今天、昨天、最近7天及最近30天查看Top10蜘蛛爬取URL的爬取次数及占比，方便站长对热门蜘蛛爬取页面URL进行分析。蜘蛛日志
支持按今天、最近7天及最近30天查看蜘蛛日志，包括蜘蛛访问时间、状态码、访问链接、蜘蛛IP及蜘蛛名称等参数。并且支持按蜘蛛名称、状态码及时间进行筛选日志；以及可通过访问URL、蜘蛛IP搜索蜘蛛日志。
蜘蛛列表
蜘蛛列表包含蜘蛛列表、蜘蛛IP段及蜘蛛拦截三部分的功能，其中：
蜘蛛列表-列表包括蜘蛛名称、蜘蛛类型、蜘蛛地址、最近来访时间、爬取URLs及占比情况等数据，支持按蜘蛛名称、蜘蛛类型及时间段筛选查询；并且支持忽略或者拦截指定蜘蛛。蜘蛛IP段-在该列表可以查看不同蜘蛛对应IP段及其占比情况，支持按蜘蛛名、时间进行筛选查询；且支持按蜘蛛名称及蜘蛛IP段进行拦截。蜘蛛拦截-插件能够对日常访问蜘蛛IP进行识别判断，列出疑似伪蜘蛛，以便于站长对其进行拦截。在该功能模块，站长可以增加蜘蛛及IP拦截，也可以移除拦截等管理操作。访问路径
支持按今天、最近7天及最近30天查看蜘蛛访问路径（爬取页面URL）具体信息列表，包括URL、URL类型、爬取次数及占比情况等数据。并且支持按蜘蛛名称、类型、状态、时间、访问URL及蜘蛛IP进行筛选查询。
热门文章
此功能模块是为了方便站长按蜘蛛名称、不同状态的文章类型及时间，快速了解网站文章蜘蛛访问量、出链数及入链数。站长再根据这几个指标，对文章进行内链布局处理，提升蜘蛛爬取频率，从而提升网站收录量。
插件设置日志保留-支持设置插件日志保留时间周期（最近30天、最近3个月、最近6个月、最近1年或永久），及一键删除已存在的日志。蜘蛛列表管理-支持新增自定义蜘蛛，以记录遗留的蜘蛛日志数据；并支持自定义蜘蛛类型及设置蜘蛛记录状态。链接自定义-允许通过设置链接规则来区分蜘蛛爬取URL链接类型，支持添加自定义或者修改新增现有链接类型的规则。
插件是昨天安装的，体验还不错，有部分功能是收费的，免费版可以满足基本的使用，但是如果想要更加精细的分析蜘蛛抓取路径，需要使用付费版，统计蜘蛛ip，然后在这里输入蜘蛛ip，查询单个蜘蛛的访问路径，给以后的网站优化提供方向。
插件下载：https://wordpress.org/plugins/spider-analyser/
