技术细节：robots文件与站点地图

建站初期：选择域名与服务器的基本逻辑 对于搭建网站的新手而言，域名和服务器是第一步

txt 文件，可以告知搜索引擎哪⭐些页面可以抓取，哪些需要屏蔽

建站初期：选择域名与服务器的基本逻辑

常见做法是采用 扁平化目录 ，控制层级在三级以内