L08 参考解:端到端优化、安全回归与求职答辩
这是可讨论的参考设计,不是唯一架构。先完成实验题面,再对照本解。
关键推导
端到端加速的计算先还原关键路径:原2s,优化后1.6s,speedup=1.25。单独模型速度2倍与整体速度2倍没有等价关系。若并行引入更多排队、重试和输出合并,总延迟还可能变坏。
合格报告可以得出“优化无效”。例如上下文压缩少了token,却丢掉关键证据导致成功率降低;应展示bad cases与回滚条件,而不是隐藏失败。每成功成本使用所有试次支出;安全违规独立硬门槛,不进入普通加权平均。
最终架构答辩应能指出每条保证的拥有者:业务事务保证余额/账本一致,授权服务约束可访问对象,审批绑定具体意图,调度控制资源,sandbox限制执行,eval判断任务事实。没有任何一个Agent框架名字能替代这些解释。
参考算法与实现位置
freeze baseline → state hypothesis → add instrumentation → run paired tasks
→ inspect hard safety gates → compare quality → compare end-to-end cost/latency
→ ablate changed mechanism → document failures → decide keep/revert
实验报告必须列出未验证项目。网页开发者只能呈现真实提交结果;默认教学数据标签不能去掉。
应当得到的可检查结果
| 实验 | 必须报告 |
|---|---|
| 模型800→400,其他共1200 | 总2000→1600,仅1.25倍加速 |
| 预算增加换成功率 | 总成本与每成功成本,不能只报成功率 |
| 缓存命中 | 权限域、版本、TTL和失效条件 |
| 多Agent | 与单Agent同预算或明确预算差异的比较 |
| 恶意工具备注 | 不能取得审批或跨租户能力 |
| 全部离线测试通过 | 不等于真实模型、真实沙箱已验证 |
怎样判断替代实现是否等价
替代实现必须保留题面中的身份来源、状态归属和失败语义。数据库/框架可以更换,但应把相同故障窗口重新跑一遍。只在正常路径输出一致,不足以证明恢复与授权等价。异步或并发实现还必须解释取消传播、竞争窗口和资源回收。
常见错误与修正
第一类错误是把协议或框架提供的局部保证放大成业务保证:格式正确不等于授权,执行结束不等于业务成功,持久化不等于外部副作用恰好一次。修正方式是找到事实源并把不变量放在拥有该事实的层。
第二类错误是用演示数据替代证据。已有fixture可以检查确定性公式与状态机,但真实模型、网络或容器的结论需要实际运行。报告同时写出“已验证”“仅模拟”“未验证”,比宣称全部完成更有工程价值。
实现范围与限制
本包交付课程及参考内核,不承诺就业结果、生产SLO或模型任务成功率。最终项目成绩需按证据评审,不按界面精美程度代替技术验收。
开放题评分要点
可复现证据30;可靠性与安全25;端到端分析20;设计取舍15;答辩与交付10。 正确的反例、失败分析和替代方案论证应获得分数;框架堆叠、只报最终成功截图、删除失败成本不应获得同等评价。