理解蜘蛛池与主机带宽的基本关系

站点数量与并发请求： 假如⚡蜘蛛池中包💎含了数百甚至上千个独立子站，每天会有大量抓取请求同时到来

例如，一个100KB的页面，在5Mbps带宽下，理论传输时间不到0

2秒；但如果页面有2MB未🚀优化图片，即便10Mbps带宽也需要将近2秒才能加载完毕，加上网络延迟和服务器处理🔥时间，很容易突破3秒红线