Karpathy 测试 AI 的新 3D 世界生成“气氛检查”
The Decoder··作者 Maximilian Schreiner
关键信息
Karpathy 说这个模型运行了大约两小时，使用了 100 万 token 的预算，并用 Three.js 渲染场景。一个关键限制是模型不能直接观看自己的视频输出，只能依赖截图，这导致了物体摆放和动画上的错误。
资讯摘要
Andrej Karpathy 使用 Claude Opus 5，把《指环王》中的一段文字改造成了一个 3D 浏览器场景。这个模型大约生成了 5,500 行代码，整个过程持续了约两小时。Karpathy 估计这次实验的 token 成本约为 10 美元，这意味着它在成本上非常低，但产出却相当复杂。这个场景使用 Three.js 构建，Three.js 是一种基于浏览器的 3D 图形库，Karpathy 还把源代码公开，方便其他人运行和修改。Karpathy 认为结果虽然粗糙，但很有趣，音频则由 ElevenLabs 提供。
根据他的说法，模型能够自己摆放和动画化物体，但由于它不能直接查看视频输出，只能依赖截图，因此出现了一些错误。Karpathy 指出，现实中没人会手工去构建这样的世界，但借助模型，成本几乎可以忽略不计。他进一步认为，这类能力可能让按需生成游戏世界成为可能，用户甚至可以被放进世界里扮演配角或主角。Karpathy 把这次实验称作“气氛检查”而不是严格基准，并提到其他用户已经让 Opus 5 写出完整的浏览器游戏，例如第一人称射击游戏和 Minecraft 克隆。
资讯正文
独角兽、鹈鹕、中土世界：OpenAI 联合创始人 Karpathy 正在寻找下一个 AI 直觉测试
要点
- Andrej Karpathy 让 AI 模型 Claude Opus 5 把《指环王》中的单个段落改造成一个 3D 浏览器场景，在大约两个小时内生成了 5,500 行代码。
- 整个过程大约只花了十美元。该模型能够自行放置和动画化物体，但由于它只能通过截图查看自己的视频输出，因此出现了一些错误。
- 对于在 Anthropic 工作的 Karpathy 来说，这项测试展示了按需构建廉价、定制化游戏世界的潜力。不过，他认为这一结果更像是一次直觉检验，而不是硬性基准。
《指环王》中的一个段落，生成了 5,500 行代码。Andrej Karpathy 让 Claude Opus 5 把托尔金的开篇内容变成了一个 3D 浏览器场景。
该模型工作了大约两个小时，拥有一百万 token 的预算（约合 10 美元），并使用 Three.js 完成了全部渲染。Three.js 是一个用于在浏览器中实现 3D 图形的库。Karpathy 将源代码发布到了网上，方便其他人回放并修改这个场景。
Karpathy 的观点是，广为人知的鹈鹕测试已经接近上限。Simon Willison 设计的这项有趣基准要求模型画出一只骑自行车的鹈鹕，之所以选择这个提示，是因为它足够荒诞，以至于这个主题不太可能已经存在于训练数据中。这个想法其实更早就有了。2023 年，微软让 GPT-4 在 TikZ 中画出一只独角兽，作为其《Sparks of AGI》论文的一部分，并将其视为具备空间推理能力的证据。当时的 GPT-4 只接受文本数据训练，不同于如今驱动各大聊天机器人的多模态模型。
Karpathy 称这个结果粗糙但有趣。音频由 ElevenLabs 提供，而模型则自行放置并为物体制作动画。Karpathy 说，没有人会手工构建这样的世界，但有了模型，成本几乎为零。他认为，这类技术有望用于按需生成游戏世界，用户可以作为配角或主角被投放进去。
不过，一个问题依然存在。模型无法观看自己的视频输出，只能依赖截图，这导致了一些错误。其他用户正在让 Opus 5 编写完整的浏览器游戏，从第一人称射击游戏到《Minecraft》克隆版都有。这些都算不上硬性基准。它们只是直觉测试。
Karpathy 是 OpenAI 的联合创始人之一，并曾担任特斯拉 AI 负责人。后来，他创办了教育初创公司 Eureka Labs，并自 2026 年 5 月起在 Anthropic 从事预训练研究。
来源与参考
收录于 2026-08-04