持续观察，耐心调整

持续观察，耐心调整 服务器日志分析不是一次性的工作

为什么要看服务器日志？

通过添加内链📢和站点地图，两周后收录量提升到1200篇

如果发现深度普遍较浅，你就需要⭐调整导航结构，使用面包屑导航或标签聚合，让重要页面离首页更近

建议每周或每两周查看一🎨次关键数据：爬🔥虫来访次数、抓取页面数、状态码分布

常用的日志分析工具

服务器日志是记🤔录🎉网站每一次请求的原始文件，包括爬虫的来访记录

如何根据日志优化收录量？

抓取时的状👍态码 ——返回200（正常）、404（页面不存在）、3▶️01（跳转）、500（服务器错误）分别有多少