观察者网
目前,市面上并没有一款“官方指定”的蜘蛛池日志分析软件,但以下几类工具在实践中较为常见: 工具类别 代表软件/平台 主要功能与特点 服务器日志分析通用工具 AWStats、Webalizer、GoAccess 可分析原始访问日志,识别搜索引擎爬虫IP(如百度蜘蛛、谷歌爬虫),统计抓取时间、频率和页面分布
设为首页
关于百度
About Baidu
使用百度前必读
帮助中心
© Baidu
京ICP证030173号
京公网安备11000002000001号