报告、成本与责任
第 34 课:报告、成本与责任
上一课我们让结论通过了验证与评审。这一课回答最后三个问题:自动写出的报告到底成色如何?这条流水线要花多少钱?出了事谁来负责?我们不看宣传,只看一份真实产出——45 页、105 篇文献、6 天交付、99% 由 Agent 执笔的综述;把它拆成 token 账、人机分工与责任链,最后给出一条从"可测、可回滚"环节切入的落地路线。这也是全课程「第一性原理大模型课程」的收口。
② 说清快与准怎么分工——人只该出现在哪几个判断点
③ 说出 L5 的三个瓶颈,并为"出错谁负责"给出署名与免责的落地做法
第五部分走到最后一步:报告本身能不能被自动写出来?先看一份真实产出,不看宣传。
因为"能写"这件事最容易被 demo 夸大,而一份公开的产出数据会把成色摊开:多少页、烧了多少 tokens、人到底做了多少。token 指模型读写的最小文本单位,也是这里所有账单的计价单位。就像看一家餐厅不看菜品照片,看它一晚上出多少桌、翻台几次。所以先把这份产出拆成读数。
| 指标 | 数值 |
|---|---|
| 成品页数 | 45 页 |
| 引用文献 | 105 篇 |
| 迭代次数 | 6 次 |
| 交付耗时 | 6 天 |
| 初稿耗时 | 76 分钟 |
| 智能体运行轮数 | 约 108 轮 |
| 消耗 tokens | 约 64.8 万 |
| LaTeX 代码行数 | 2234 行 |
| Agent 执笔占比 | 约 99% |
| 项 | 数值 |
|---|---|
| 交付耗时换算 | 6 天 = 6 × 1440 = 8640 分钟 |
| 初稿占比 | 76 ÷ 8640 = 0.88% |
| 含义 | 初稿极快,但交付不等于初稿 |
| 项 | 数值 |
|---|---|
| 总 tokens | 64.8 万 = 648000 |
| 总轮数 | 108 轮 |
| 单轮平均 | 648000 ÷ 108 ≈ 6000 token/轮 |
有真实产出数据 → 报告确实能被自动产出(45 页、105 篇文献、99% 由 Agent 执笔、单轮约 6000 token);没有它 → 我们只能拿 demo 当证据。提醒:写只是最后一环,真正的成本与责任在后几张卡。
上一张卡片的读数里,初稿 76 分钟、交付却用了 6 天——这个差额去哪儿了?
因为那 6 天里,机器烧的是 tokens、人做的是判断:要不要换方向、这一段结论站不站得住、署谁的名。人一旦去逐字改稿,就从"判断者"退化成了"第二台生成器",既慢又贵。就像导演不自己演每个角色,只决定"这条过不过"。所以要把人的动作数清楚。
| 环节 | 谁做 | 判据 |
|---|---|---|
| 定题 | 人 | 这个问题值不值得做 |
| 迭代验收 | 人 | 这一版够不够格进下一轮 |
| 署名与免责 | 人 | 出错了由谁担责 |
| 生成与返工 | Agent | 按迭代目标产出 |
| 判断点 | 次数 |
|---|---|
| 定题 | 1 |
| 迭代验收 | 6(按迭代次数推断) |
| 署名 | 1 |
| 合计 | 1 + 6 + 1 = 8 个 |
| 介入(人判断 / Agent 执行各计一次) | 次数 | 占比 |
|---|---|---|
| 人做出判断 | 8 | 8 ÷ 116 = 6.9% |
| Agent 执行 | 108 | 108 ÷ 116 = 93.1% |
| 合计(同为"次介入") | 116 | 100% |
有分工 → 人只花在 8 个判断点(约 6.9%),产出快且责任清晰;没有分工、让人逐字改 → 人退化成第二台生成器,又慢又贵,还丢掉了"人对结论负责"的锚点。
上一张卡片把人压缩到 8 个判断点——省下的人力,其实是被 tokens 买了单。这笔账怎么拆?
因为总价会骗人:一次生成看着便宜,但每轮都要重发一遍 context(模型这一次能看到的全部输入),量就按轮数滚起来。就像打车费要看里程不是一个起步价。所以先把总量拆到单轮,再拿第 26 课的口径校准。
| 项 | 数值 |
|---|---|
| 总 tokens | 648000 |
| 总轮数 | 108 |
| 单轮 | 648000 ÷ 108 = 6000 |
| 口径(第 26 课) | 倍数(相对普通对话) | 本例单轮折算 |
|---|---|---|
| 普通对话 | 1× | 6000 ÷ 15 = 400 |
| 单 Agent | 约 4× | 6000 ÷ 4 = 1500 |
| 多智能体 | 约 15× | 6000(锚点) |
| 单价假设(示意) | 64.8 万 tokens 的费用 |
|---|---|
| $3 / 百万 token | 0.648 × 3 = $1.94 |
| $15 / 百万 token | 0.648 × 15 = $9.72 |
| 口径说明 | 单价为示意,需人工核实;不同模型差数倍 |
有这笔账 → 你能说"一份 45 页报告 ≈ 64.8 万 tokens、单轮约 6000";没有账 → 只能说"好像不贵"。单价是示意,成本结构才是可迁移的结论:token 随轮数放大,选型决定单价。
上一张卡片算清了成本——就算付得起这笔 tokens,为什么 L5 依然是一个"构想"而不是"下个版本"?
因为卡住的不是模型跑分,而是三件结构性的事:经验留不下来、它判断不了自己好不好、架构撑不大。就像一支每天重新招人、从不记笔记的团队——人再聪明也攒不出积累。第一件尤其关键——一窗 context 之外的经验如果留不住,它就永远在"从零开始"做研究。所以先把 L1–L5 摆出来,再看卡在哪。
| 级别 | 能独立决定什么 | 可自主运行多久 |
|---|---|---|
| L1 | 补全一行 | 单个 token |
| L2 | 拆解已定义任务 | 每步需审批 |
| L3 | 自选文件、自修测试 | 10–100 个连续动作 |
| L4 | 生成思路、跑实验 | 限定领域多步骤 |
| L5 | 自主制定研究规划 | 完全自主(构想) |
| 项 | 数值 |
|---|---|
| 分析的系统总数 | 17 款 |
| 达到 L5 的 | 0 款 |
| 比例 | 0 ÷ 17 = 0% |
| 瓶颈 | 卡在哪 | 现状 |
|---|---|---|
| 长效知识沉淀 | 经验超出一窗 context 就丢 | 未解决 |
| 可靠自评 | 它判不准自己做得对不对 | 未解决 |
| 可扩展架构 | 缺有理论支撑的规模化方案 | 未解决 |
有这把尺子 → 你能一眼看出某系统在 L3 还是 L4、差在哪;没有它 → "自主研究"变成一个谁都能自称的标签。L5 的门槛不是模型分数,而是长效知识沉淀、可靠自评、可扩展架构这三块地基。
上一张卡片说 L5 到不了,因为"可靠自评"没解决——那当它真的出错时,责任该落到谁头上?
因为模型只在 context 里生成、无法承担任何法律或伦理责任,所以一旦出错,责任只能落回那个"按了开始键、又签了名"的人。署名把"谁负责"写在纸面上,免责声明则把"负责的边界"讲清楚。就像药品说明书:既写厂家,也写"请遵医嘱"。所以要把责任链拆开数一数。
| 署名主体 | 类型 |
|---|---|
| 陈德里 | 人 |
| DeepSeek-V4-Pro | 模型 |
| GPT-Image2 | 模型 |
| 合计 | 1 + 2 = 3 个 |
| 项 | 数值 |
|---|---|
| 署名主体 | 3 |
| 可承担责任的(人) | 1 |
| 需靠免责声明界定的(模型) | 3 − 1 = 2 |
| 覆盖对象 | 声明内容 |
|---|---|
| 严谨性 | 并非严谨学术论文 |
| 组织立场 | 不代表任何公司或组织观点 |
| 产出性质 | 出于兴趣与系统测试 |
有责任链 → 出错时能追到"谁定题、谁验收、谁署名";没有它 → 99% 由模型执笔就成了"没人负责"的挡箭牌。做法:署名列全主体、免责写清边界,让责任落在人身上。免责声明结构可对照该综述原文的免责段落。
上一张卡片把责任落到了人。最后一个实务问题:如果你想在自己的业务里用这条流水线,从哪一步开始?
因为一上来就让它"全自动做研究",出错了既测不出、也退不回——风险和收益完全不对等。就像新药先做小样本安全性试验,再谈大规模上市。所以按"可测 × 可回滚"给环节排序,从最稳的那一格切入。
| 环节 | 可测 | 可回滚 | 适合起步 |
|---|---|---|---|
| 文献检索与综述 | 是 | 是 | 首选 |
| 实验执行 | 是 | 弱 | 谨慎 |
| 选题与结论 | 否 | 否 | 不建议 |
| 环节 | 可测(0/1) | 可回滚(0/1) | 起步分 = 可测 × 可回滚 |
|---|---|---|---|
| 文献检索与综述 | 1 | 1 | 1 |
| 实验执行 | 1 | 0 | 0 |
| 选题与结论 | 0 | 0 | 0 |
| 维度 | 起步阶段是否先过关 |
|---|---|
| validity 有效性 | 是 |
| reliability 可靠性 | 是 |
| novelty / impact / provenance | 后置 |
| 先过关数 | 2 ÷ 5 维 |
全课程收口:从 Transformer 到自主研究,主线始终是同一件事——把"看起来行"变成"可验证地行"。落地的第一站就是选一个可测、可回滚的环节,用第 33 课的 validity 与 reliability 当验收线,先评测后生成——这也是「第一性原理大模型课程」34 课给你的最后一条可执行建议。