问HN:你从训练自己的GPT中学到了什么有趣的东西?

2作者: amadeuswoo大约 17 小时前原帖
不使用API,实际上是从头开始训练一个模型,即使是一个小模型。<p>关于数据、训练过程或输出,有什么让你感到惊讶的地方吗?
查看原文
Not using APIs, actually training a model from scratch, even a small one<p>What surprised you about the data, the training process, or the output?