从零搭建私有爬虫池：一套可操作的百度SEO实操方案

完成安装后，可以通过 redis-cli pi⚡ng 命令测试Redis是否正常运行，返回 PONG 即表示成功

1' —— Redis服务器地址，如果Redis安装在本地则保持不变 REDIS_PORT = 6379 —— Redis默认端口 CONC💡URRENT_REQUESTS = 16 —— 并发请求数，可根据服务器性能调整 此外，还需要在爬虫文件中设置 start_urls ，即爬虫池的初始种子URL

com 推送后，观察终端日志输出：如果出现 Downloaded 和 Scraped 信息，说明爬虫池已经成功运转