https://www.youtube.com/watch?v=7xTGNNLPyMI
第5集(约 28 分钟)。聊模型在解题场景下的原生计算能力:训练与推理都是从左到右处理一维 token 序列,中间步骤也得落成 token,模型才能「想」。由此解释拼写类困境、能力参差(有的难事会、有的易事翻车),并引入从监督微调(SFT)走向强化学习的动机。
翻译视频仅供学习交流
转载+翻译:出发向未来
原作者:Andrej Karpathy
原链接:https://www.youtube.com/watch?v=7xTGNNLPyMI
中文配音由 AI 生成