搭建蜘蛛池随机User-Agent池的核心逻辑

为什么需要随机化User-Agent 搜索引擎爬虫在抓取网页时💎，通常会在HTTP请求头中😎携带标识自身的User-Agent字符串