这段普通实验记录，怎样自己产生训练题？

刚才我们问，大量矩阵计算到底要反复算什么。现在拿回开场这份实验记录。它没有一道人工写好的选择题，也没有人逐句标注“这句话包含了比较能力”。它只是写了在相同设置下，A用时十二秒，B用时八秒，没有测量内存。这样的普通文字，已经可以变成训练材料。

先看模型读到“B用时”的这个位置。我们把后面的内容暂时挡住，请它给下一项文字分配概率；原始记录告诉我们，实际出现的是八。

再换一个位置，读到“未测量”，材料里后面是“内存”。这里不是老师临时发明一个正确答案，而是利用已经存在的后续文字产生监督。原文在我们手里是完整的，模型在当前预测时能读到多少，仍然要单独规定。

这件事有两个价值。第一，普通序列可以持续提供训练题，不必先为每个新领域设计一套人工标签。第二，不同位置提出的要求并不一样：有的更依赖表达习惯，有的需要把数字与对象对应起来，还有的需要更远的前文。我们先不急着把这些要求叫成某种智能；下一页把整段文字变成一排确切的输入和目标，看看训练究竟怎样组织。