返回课堂

第二问:它学到了什么,怎样才算有证据?

本页问题

任务结果与内部响应回答不同问题。先辨认两组材料的模型身份,再看观察怎样引出检验。

OV08/b0 · 看任务表现,也让内部解释接受检验。

任务输出 · MAE内部响应 · InceptionV1遮挡输入模型预测原图目标预测与目标,具体差在哪里?猫汽车为何同一单元对它们响应?提出解释 → 用新例、反例与干预检验不同研究对象;任务结果与内部解释各有证据
看任务表现,也让内部解释接受检验。

MAE 的遮挡输入、预测与原图,允许比较模型完成任务的方式与误差;Goodfire 的猫车材料来自另一模型 InceptionV1,用于观察某个内部单元在哪些输入上响应较强。两者不是同一模型连续开展的实验。任务成绩说明能做什么,内部响应帮助提出解释,新例、近反例及受控干预再检验解释的支持范围。可视化的价值在于使这些比较可观察,而不是仅凭漂亮图像宣布机制已被证明。

进一步解释

MAE 的重建质量与下游任务能力需要分别评价;Goodfire 图像模型观察、语言模型归因及消融也需保持实验身份。单元的激活图不单独建立因果性,特定条件的局部干预也不推出所有单元都有唯一功能。

教师备课:指图与模拟问答

指图与推进 · 不朗读分别指出 MAE 与 InceptionV1 的身份,再指任务结果、内部观察和检验三个位置;在猫车照片留下问题,不提前揭示其解释。

本态来源与条件

MAE 与 Goodfire/InceptionV1 原始素材,模型和实验身份分开;本页不展示新增实测。

接下来

承载方式与能力证据都明确后,这些计算还要在真实机器上完成。

补充推导、边界与来源

再想一步

表现、解释和干预之间需要可追溯的桥梁:先确定输入和测量对象,再提出能预测新例的解释,最后选择真正改变内部计算的操作。一次干预支持的结论仍受输入与对照范围约束。

从本页继续阅读

本页证据与条件

MAE 与 Goodfire/InceptionV1 原始素材,模型和实验身份分开;本页不展示新增实测。

进入主题正文