学会识别网站日志中的爬虫行为模式

如果日志显示爬虫反复请求缓存文件或无关参数页，说明爬取路线可能出现偏差

如果日志中缺少资源请求，👍可能是robots