很多人第一次用Codex,仍然把它当成一个更会回答问题的聊天框。
把所有HTML都塞进网站地图并不正确。草稿、重复页、重定向页和禁止索引页都可能不该出现。
所以这篇文章只解决一件事:让网站地图只包含真实存在、规范地址正确且允许索引的页面。最终交付必须能被另一位不了解过程的人复查,而不是只由工具自己宣布完成。
适合谁
适合新增或删除大量页面后,需要核对sitemap.xml和真实站点结构的人。
如果当前只有一个宽泛想法,先把它改成一项可交付任务;如果涉及唯一原件、生产环境或专业结论,必须保留人工确认。
Codex可以读取项目、修改文件和执行命令,因此先使用副本或版本控制,明确禁止触碰的目录与生产环境。高风险操作、唯一原件和最终判断必须留给人工。
开始前准备
- 构建后的页面清单
- canonical与robots规则
- 现有网站地图和部署路由
- 建立一个测试副本或新目录,不直接操作唯一原件。
- 写下一句验收标准:网站地图XML有效,URL与canonical一致,只包含符合索引规则的真实页面
先确认这三项材料是当前版本,并写明各自用途。文件越多,越需要先编号和分批,不能用一次全量处理来测试规则是否正确。
完整步骤
第一步之前:先做一个最小样本
最小样本可以是一份文件、一页内容、一组数据或一个只读任务。它的作用不是展示效果,而是验证材料能读、规则能执行、结果能复查。
第一步:列出全部页面状态
区分正式页、草稿、分类页、重定向、错误页和工具页。
先停在这里检查一次。此时应已经形成“页面索引资格表”,并且能回到原始材料说明它从哪里来。
第二步:解析网站地图地址
检查XML格式、重复URL、域名、协议、路径和lastmod格式。
这一阶段的完成标志不是工具有回复,而是“网站地图解析报告”已经可供人工检查。
第三步:双向对比页面与地图
找出应该收录却缺失的页面,以及出现在地图但不应索引的页面。
继续下一步之前,抽查“双向差异清单”中的边界项和异常项;发现前提不成立就先修正。
第四步:重建并验证入口
生成新地图后检查索引文件、robots引用和代表URL的canonical。
把“最终网站地图与验证记录”作为本轮留存证据。后续合并或扩大范围时,都应能用它复盘。
第五步:人工验收并沉淀流程
完成一次任务只是起点。保留材料版本、实际改动和验收记录,下次才有条件把它训练成稳定工作流。
实际示例
文章Markdown状态为draft,就不应生成文章页或进入网站地图;正式分类页即使没有独立正文,也可能是重要索引入口。
可以先这样描述任务:
我正在处理“让网站地图只包含真实存在、规范地址正确且允许索引的页面”。已有材料包括构建后的页面清单、canonical与robots规则、现有网站地图和部署路由。请先不要扩大任务范围,也不要补造缺失信息。先完成“列出全部页面状态”,输出可以人工检查的中间结果;我确认后,再继续“解析网站地图地址”。最终请按照“网站地图XML有效,URL与canonical一致,只包含符合索引规则的真实页面”列出验收结果和仍需人工确认的内容。
实际使用时把示例中的材料名替换成你的真实文件,同时保留“不要补造缺失信息”和“列出待确认项”两条约束。
常见问题与报错
网站地图有页面,搜索仍找不到
网站地图只提供发现线索,不等于保证收录;继续检查页面质量、canonical、robots、HTTP状态和站内链接。
任务跑了很久,却说不清改了什么
先要求列出计划和预计修改文件,每个阶段输出变更摘要、diff、命令和未解决项;没有检查点的长任务应暂停后重新拆分。
一次修改太多文件,出现问题无法定位
回到版本控制或副本,按一个目标一组文件重新执行;每批修改后立即运行对应检查,不把多个不相关需求放进同一次任务。
排查时先看实际读取文件、修改diff、命令和输出。一次只调整一个范围或规则,避免把多个故障叠在同一次执行里。
完成后的检查方法
- 网站地图XML有效,URL与canonical一致,只包含符合索引规则的真实页面
- 关键结论能回到原始材料、文件、命令输出或当前控制台。
- 没有把缺失信息、推测内容或示例数字写成已经确认的事实。
- 重要文件保留原件、版本或可恢复副本,敏感信息没有进入公开内容。
- 结果已经由真正负责这项工作的人审阅,而不是只看页面是否生成。
验收通过的标准很朴素:结果能用、过程能查、出错能退、未知项没有被伪装成结论。
资料来源
- OpenAI Codex文档
用于核对Codex的产品定位和当前官方使用说明。
- OpenAI AGENTS.md指南
用于核对项目级规则文件的作用范围;具体行为以当前Codex版本为准。
FAQ
可以一次把整个任务交给Codex完成吗?
不建议一次交付全部范围。先按本文步骤完成一个小样,用“网站地图XML有效,URL与canonical一致,只包含符合索引规则的真实页面”验收,再决定是否扩大范围。
遇到“网站地图有页面,搜索仍找不到”应该先检查什么?
网站地图只提供发现线索,不等于保证收录;继续检查页面质量、canonical、robots、HTTP状态和站内链接
完成后还需要人工检查吗?
需要。AI或执行工具负责推进流程,最终仍要由你根据原始材料、任务规则和“网站地图XML有效,URL与canonical一致,只包含符合索引规则的真实页面”完成验收。
