蜘蛛池批量抓取参数详解

动态参数过滤 ：对于带有会🔥话ID或时间戳参📚数的URL，可设置忽略特定参数，防止同一页面被当作多个不同链接处理

抓取深度 ：一般设置为1（仅抓取列表中的URL）或2（抓取列表URL并对其中包含的站内链接再抓取一层）