注意事项与边界

抓取频率与覆盖范围 统计每天有多少条百度蜘蛛的请求记录，以及这些请求指向了多少个不同的URL

如果总数很小，可能说明网站内容吸引力不足或存在抓取障碍

第三步：分析爬虫抓取的关键指标

第三步：分析爬虫抓取的关键指标 获得百度爬虫的访问数据后，重点查看以下几个方面： 1