中国新闻网
百度官方会不定期更新其爬虫的UA标识,以下整理常见的百度蜘蛛UA列表及注意事项,供参阅
36 (compatible; Baiduspi🔮☀️der/2
配合日志分析,确认实际访问IP是否与百度官方IP段匹配
html) 百度新闻蜘蛛: Baiduspider-news+(+http://www
百度移动端与PC端蜘蛛UA 百度PC蜘蛛: Mozilla/5
html) 注意:上述UA中的版👍本号(如Chrome版本、Android版本)可能会随百度爬虫更新而变化,建议定期从百度官方开放平台获取最新列表
操作注意事项 在实际操作中,以下几点值得关注: IP白名单与UA双验证 :百度蜘蛛的IP段是公开的,建议同时校验请求IP是否属于百度官方IP段,而非仅依赖UA字符串