a↗Agent 工程实战中文课程 / v1.0.0⌕ 搜索课程/
本页目录

L08 参考解:端到端优化、安全回归与求职答辩

这是可讨论的参考设计,不是唯一架构。先完成实验题面,再对照本解。

关键推导

端到端加速的计算先还原关键路径:原2s,优化后1.6s,speedup=1.25。单独模型速度2倍与整体速度2倍没有等价关系。若并行引入更多排队、重试和输出合并,总延迟还可能变坏。

合格报告可以得出“优化无效”。例如上下文压缩少了token,却丢掉关键证据导致成功率降低;应展示bad cases与回滚条件,而不是隐藏失败。每成功成本使用所有试次支出;安全违规独立硬门槛,不进入普通加权平均。

最终架构答辩应能指出每条保证的拥有者:业务事务保证余额/账本一致,授权服务约束可访问对象,审批绑定具体意图,调度控制资源,sandbox限制执行,eval判断任务事实。没有任何一个Agent框架名字能替代这些解释。

参考算法与实现位置

freeze baseline → state hypothesis → add instrumentation → run paired tasks
→ inspect hard safety gates → compare quality → compare end-to-end cost/latency
→ ablate changed mechanism → document failures → decide keep/revert

实验报告必须列出未验证项目。网页开发者只能呈现真实提交结果;默认教学数据标签不能去掉。

应当得到的可检查结果

实验 必须报告
模型800→400,其他共1200 总2000→1600,仅1.25倍加速
预算增加换成功率 总成本与每成功成本,不能只报成功率
缓存命中 权限域、版本、TTL和失效条件
多Agent 与单Agent同预算或明确预算差异的比较
恶意工具备注 不能取得审批或跨租户能力
全部离线测试通过 不等于真实模型、真实沙箱已验证

怎样判断替代实现是否等价

替代实现必须保留题面中的身份来源、状态归属和失败语义。数据库/框架可以更换,但应把相同故障窗口重新跑一遍。只在正常路径输出一致,不足以证明恢复与授权等价。异步或并发实现还必须解释取消传播、竞争窗口和资源回收。

常见错误与修正

第一类错误是把协议或框架提供的局部保证放大成业务保证:格式正确不等于授权,执行结束不等于业务成功,持久化不等于外部副作用恰好一次。修正方式是找到事实源并把不变量放在拥有该事实的层。

第二类错误是用演示数据替代证据。已有fixture可以检查确定性公式与状态机,但真实模型、网络或容器的结论需要实际运行。报告同时写出“已验证”“仅模拟”“未验证”,比宣称全部完成更有工程价值。

实现范围与限制

本包交付课程及参考内核,不承诺就业结果、生产SLO或模型任务成功率。最终项目成绩需按证据评审,不按界面精美程度代替技术验收。

开放题评分要点

可复现证据30;可靠性与安全25;端到端分析20;设计取舍15;答辩与交付10。 正确的反例、失败分析和替代方案论证应获得分数;框架堆叠、只报最终成功截图、删除失败成本不应获得同等评价。