先学重建,再做分类,大模型的收益更明显
正在载入课堂画面…
MAE 后微调成绩为 83.6、85.9、86.9,与从头监督训练逐模型差值为 1.3、3.3、3.8 个百分点。MAE 额外预训练 1600 epoch;共同使用训练图片池不等于等计算。ViT-H/448 的 87.8 使用不同分辨率,不混入本图 224 比较。
原表保留供核对配置;主屏曲线按 Table 3 重绘,不是新实验。
来源:MAE v3,Table 3;本课按原表重绘。
相关的完整阅读材料保留原有公式、引用和原始图解。