CDN 边缘节点爬虫适配方案：排除登录干扰内容

txt 或爬虫协议禁💯止抓取登录页面 在 r⚡obots

若发现部分页面仍出现干扰🌈，可进一步细化 Vary 字段或添加特定的 URL 例外规则