澎湃新闻
此时引入负载均衡架构,就能将爬虫请求分散到多台后端节点,既提高了池子的稳定性,又为后续扩容留出空间
日志分散 :各后端各自写日志会为排查问题带来困难,建议通过rsyslog统一收集到一台中心日志服务器,或者使用ELK体系做可视化分析
设为首页
关于百度
About Baidu
使用百度前必读
帮助中心
© Baidu
京ICP证030173号
京公网安备11000002000001号