避免常见的破坏性操作

需要避免的是URL中出现无意⚡义的数字编号或复杂参数，这会让爬虫难以解析层级关系

孤岛页面： 没有任何父级🎊目录或内链引入的独立页面，爬虫极难发现，收录周期会大幅延长

内部链接：树形结构中的“养分输送网络”

内部链接：树形结构中的“养分输送网络” 树形结构不是单纯的文件夹摆放，它需要依靠内部链接来实现页面之间的关联和权重的流动