返回课堂

猫和汽车,为什么会出现在一起?

本页问题

MAE 的分类成绩说明表示对任务有用;要理解内部形成了什么,需要观察具体单元。这里换到 InceptionV1。作者选出的猫和汽车照片都会强烈激活同一个单元,它们的日常类别却不同。先保留“兼做两份工作”的猜想,再检查照片里的共同结构。

RG02/b0 · 先看自然照片

InceptionV1 · 自然照片中的强响应例猫汽车两个物体类别两份工作?还是遗漏了共同结构?
先看自然照片

按我们的日常分类,左边的猫和右边的汽车差得很远。现在有一个神经元,两种图都会让它强烈响应。一个自然猜想是,它兼做了两件不相干的工作。我们先保留这个猜想,再检查有没有遗漏的共同结构。注意,这里看到的是作者选取的自然照片,还不是对全部响应分布的结论。

进一步解释

自然照片只展示输入内容,图中没有响应热图或逐像素色标。这里的“强响应”依据原文选例,不是把猫/车类别直接写成单元功能;本态只提出两种待检验读法。

教师备课:指图与模拟问答

指图与推进 · 不朗读先看两张完整自然照片;短暂停留后自行提出“兼做两件事”的猜想,不提前指V形。

本态来源与条件

Goodfire · Cammarata 2026 · #v-figure

RG02/b1 · 锁定同一个单元

InceptionV1 · 4e:55 · 同一单元的自然响应例猫汽车同一个单元4e:55固定模型与照片下一步只改变观察尺度
锁定同一个单元

补上定位:InceptionV1 的 4e 层,第五十五号单元。这里确实是同一个单元,不是分别挑了一个猫单元和一个车单元。编号帮助我们追踪对象,本身不是语义标签。接下来模型和照片都不换,只改变观察尺度,看看它响应的局部在哪里。

进一步解释

4e:55表示网络中的层与单元坐标。两种照片都来自同一坐标的响应选例,因此“两个单元各自分类”不能解释当前观察;下一页保持照片身份,改变局部观察尺度。

教师备课:指图与模拟问答

指图与推进 · 不朗读显示 InceptionV1·4e:55;两张照片保持原位,指定位编号后接局部观察。

本态来源与条件

Goodfire · Cammarata 2026 · #v-figure

接下来

保留同一照片,只改变观察尺度。

补充推导、边界与来源

这里展示作者选取的自然照片:猫来自 p47742,汽车来自 pCarX5。二者均是原文 InceptionV1 单元 4e:55 的正响应例子。照片不是本课生成的,也不是激活热图。层名 4e 与单元编号 55 用于定位研究对象,编号不代表语义标签。

作者曾参与的旧解释把它看成猫与车的多义混合;重新观察后修正了这个判断。本页先保留旧困惑,是为了让下一页的局部结构真正改变解释,而不是先给答案再找图片。这里没有把两张选例当作全部响应分布。

来源:Nick Cammarata(2026),Goodfire,Neural Networks Are Already Clean。 原图/段落 v-figure。 图与原始照片保留原作者权利;本课按原图选择固定状态、重排并加中文标注,未重跑原文模型实验。

继续沿这个问题阅读

本例的完整图、原逐态说明与推导。

本页证据与条件

Goodfire · Cammarata 2026 · #v-figure

进入主题正文