百度搜索引擎优化：分页参数影响蜘蛛抓取的应对策略

蜘蛛通常不会执行AJAX操作，因此不会产生大量分页URL，从而集中抓取资源给主要页面