跳转到内容

Week 7:公开端到端任务

本周不再增加一个孤立 Agent,而是将需求理解、设计、实现、测试和修复能力接入统一入口。教学组发布完整公开任务、公开检查和资源预算,各组可以反复运行、分析失败并改进系统。

完整系统必须能够:

  1. 从标准任务包开始,不依赖人工预先创建应用骨架;
  2. 生成并消费 Requirement IR、设计、测试和修复产物;
  3. 在受限工作区内创建代码仓库、安装依赖、构建和运行测试;
  4. 根据真实反馈进行有限迭代,并在明确条件下终止;
  5. 输出可构建、可运行的软件仓库、项目清单和英文 README;
  6. 输出足以复现关键过程的完整执行日志和最终报告;
  7. 在相同输入和预算下至少完成一次可复现运行。

允许在公开任务上修改系统、提示、IR 和工作流,但不得把应用代码、测试答案或任务名称分支硬编码到 MAS 中。

  • 端到端系统候选 commit;
  • 公开任务生成仓库;
  • 完整中间产物、执行日志和最终报告;
  • 公开检查结果;
  • 与 Week 1 基线的简要对比:成功能力、成本、失败与改进。

教学组在干净、隔离环境中,以固定任务包和预算运行候选系统,然后:

  • 检查任务输入到输出仓库的全流程是否无需人工改代码;
  • 执行安装、构建、启动、健康检查和公开功能测试;
  • 检查主要需求、接口、测试和代码之间的追踪完整性;
  • 核对日志、资源使用、失败重试和终止原因;
  • 定向体验主要用户流程,并识别明显硬编码或评测规避。

公开任务既计分也是最终调试机会。Week 8 只接受截止日前冻结的系统版本。