你可能会遇到的一个传统叙述是，AI 发展得太快，以至于新的、以研究为重点的初创公司无法超越和执行现有的 AI 企业。这正是我在 OpenAI 开始时经常听到的情绪（“你们几个人怎么可能与谷歌竞争？”），而且 1) 这是非常错误的，然后 2) 这在另一轮现在正在挑战 OpenAI 的初创公司中再次是非常错误的，在我看来，今天仍然是错误的。扩展和局部改进有效的东西将继续创造令人难以置信的进步，但随着如此快速解锁的巨大进展，过程中扬起了如此多的尘埃，并且前沿 LLM 和在 20 瓦特下运行的思维的魔力示例之间仍然存在很大的差距，产生接近 10 倍改进（而不是 10%）的研究突破的概率在我看来仍然感觉非常高——足够高以继续下注并寻找。 当然，棘手的部分是创造可能发现此类突破的条件。我认为这样的环境很少会聚集在一起，但 @bfspector 和 @amspector100 非常聪明，具备（罕见的）对 LLM 的全栈理解，从顶部（数学/算法）到底部（大内核/相关），他们对人才有很好的眼光，我认为他们能够构建一些非常特别的东西。祝贺你们的发布，我期待你们的成果！