Screaming Frog Log File Analyser是一款站长日志分析软件,用户可以将网站的日志导入到软件中,对网站进行全面的分析,以此找出孤立的网址,可以对该网址进行关联操作。
Screaming Frog Log File Analyser官方版是一款相当优秀的站长分析网站日志文件的工具。界面简洁,功能强劲,简单实用,允许用户将原始访问日志文件拖放到软件界面中进行分析,能够智能识别大型和慢速网址,找出未抓取和孤立的网址,并找到未爬网和孤立的URL及时做出调整。
识别已抓取的网址
查看和分析Googlebot和其他搜索漫游器能够抓取哪些网址,时间和频率。
发现抓取频率
深入了解哪些搜索机器人最常抓取,每天抓取多少网址以及机器人事件总数。
找到断开的链接和错误
发现搜索引擎漫游器在抓取您的网站时遇到的所有响应代码,损坏的链接和错误。
审核重定向
查找搜索机器人遇到的临时和永久重定向,这可能与浏览器或模拟爬网中的重定向不同。
改善抓取预算
分析您网站的最常被抓取的网址和目录,以识别浪费并提高抓取效率。
识别大页面和慢速页面
查看下载的平均字节数以及识别大页面或性能问题所花费的时间。
查找未抓取和孤立页面
导入网址列表并与日志文件数据进行匹配,以识别Googlebot尚未抓取的孤立或未知网页或网址。
结合并比较任何数据
使用“URL”列对日志文件数据导入和匹配任何数据。因此,导入爬网,指令或外部链接数据以进行高级分析。
1、识别已抓取的网址
查看和分析Googlebot和其他搜索漫游器能够抓取哪些网址,时间和频率。
2、发现抓取频率
深入了解哪些搜索机器人最常抓取,每天抓取多少网址以及机器人事件总数。
3、找到断开的链接和错误
发现搜索引擎漫游器在抓取您的网站时遇到的所有响应代码,损坏的链接和错误。
4、审核重定向
查找搜索机器人遇到的临时和永久重定向,这可能与浏览器或模拟爬网中的重定向不同。
5、改善抓取预算
分析您网站的最常被抓取的网址和目录,以识别浪费并提高抓取效率。
6、识别大页面和慢速页面
查看下载的平均字节数以及识别大页面或性能问题所花费的时间。
7、查找未抓取和孤立页面
导入网址列表并与日志文件数据进行匹配,以识别Googlebot尚未抓取的孤立或未知网页或网址。
8、结合并比较任何数据
使用“URL”列对日志文件数据导入和匹配任何数据。因此,导入爬网,指令或外部链接数据以进行高级分析。
一、下载安装软件,选择下面的工具进行安装。
二、安装完成后打开软件,将网站生成的LOG日志文件导入即可快速进行分析。