日志文件分析軟件Screaming Frog Log File Analyser

Screaming Frog Log File Analyser是一款幫助站長分析網站日志文件的工具，該款工具允許用戶將原始訪問日志文件拖放到軟件界面中進行分析，能夠智能識別大型和慢速網址，找出未抓取和孤立的網址。

主要功能：

識別已抓取的網址

查看和分析Googlebot和其他搜索漫游器能夠抓取哪些網址，時間和頻率。

發(fā)現(xiàn)抓取頻率

深入了解哪些搜索機器人最常抓取，每天抓取多少網址以及機器人事件總數(shù)。

找到斷開的鏈接和錯誤

發(fā)現(xiàn)搜索引擎漫游器在抓取您的網站時遇到的所有響應代碼，損壞的鏈接和錯誤。

審核重定向

查找搜索機器人遇到的臨時和永久重定向，這可能與瀏覽器或模擬爬網中的重定向不同。

改善抓取預算

分析您網站的最常被抓取的網址和目錄，以識別浪費并提高抓取效率。

識別大頁面和慢速頁面

查看下載的平均字節(jié)數(shù)以及識別大頁面或性能問題所花費的時間。

查找未抓取和孤立頁面

導入網址列表并與日志文件數(shù)據(jù)進行匹配，以識別Googlebot尚未抓取的孤立或未知網頁或網址。

結合并比較任何數(shù)據(jù)

使用“URL”列對日志文件數(shù)據(jù)導入和匹配任何數(shù)據(jù)。因此，導入爬網，指令或外部鏈接數(shù)據(jù)以進行高級分析。

軟件介紹：

日志文件分析器雖然輕巧，但功能非常強大 - 能夠在智能數(shù)據(jù)庫中處理，存儲和分析數(shù)百萬行日志文件事件數(shù)據(jù)。它收集關鍵日志文件數(shù)據(jù)，以允許SEO做出明智的決策。