高权重蜘蛛池域名策略的核心思路

分散风险——若个别域名出现异常，整体蜘蛛池仍能正常运转

建议使用百度站长平台的抓取异常工具，配合第三方日志分析，了解哪些域名真正带来了爬虫增量