站点地图（Sitemap）

站点地图通常是一个名为 sitemap.xml 的文件，按固定格式列出网站中希望被搜索引擎收录的页面地址，可以附带最后修改时间。它相当于给爬虫的一份目录，尤其适合页面多、层级深或新上线、外部链接少的网站。

单个 sitemap 文件有网址数量和文件大小上限，页面多时可以拆成多个文件，再用站点地图索引文件统一引用。生成方式最好是由 CMS 或构建流程自动产出，内容发布、下线时同步更新，避免人工维护导致过期。

站点地图写好后，可以在 robots.txt 中声明其位置，并提交到百度搜索资源平台、Google Search Console 等站长工具。百度还提供主动推送接口，适合新内容发布后尽快通知抓取。

需要注意的是，放进 sitemap 不等于一定被收录。列表里应只包含返回 200、可被索引、与 canonical 一致的正式网址，不要把跳转页、404 页、带参数的重复页面放进去，否则会降低这份文件的参考价值。