Andrej Karpathy(@karpathy)

More on the pelican on the bicycle test from @simonw: https://t.co/OXmtODyTKj I uploaded the source...

6.0内容质量

TL;DR · AI 摘要

文章展示了一个基于LLM的创意测试案例，但内容碎片化且缺乏技术深度，核心信息不完整。

核心要点

  • Andrej Karpathy分享了测试Opus 5模型的实验方法
  • 实验使用《指环王》文本和1M token预算（约$10）
  • 源代码已开源但未展示具体技术实现细节

结构提纲

按章节快速跳转。

  1. §引言

    介绍测试LLM的创意案例及其技术背景

  2. ·实验设计

    描述使用Opus 5模型和《指环王》文本的测试方案

  3. ›资源预算

    说明实验使用的1M token预算及成本估算

  4. ·技术实现

    提及源代码开源但未展开具体实现细节

思维导图

用一张图看清主题之间的关系。

查看大纲文本（无障碍 / 无 JS 友好）
  • LLM测试案例
    • 实验方法
      • Opus 5模型测试
      • 《指环王》文本输入
    • 资源参数
      • 1M token预算
      • $10成本估算
    • 技术产出
      • 开源代码仓库
      • 浏览器可运行

金句 / Highlights

值得收藏与分享的关键句。

#LLM#AI测试#开源项目
打开原文

Andrej Karpathy 在 X 上的推文： "关于 @simonw 提到的 pelican on the bicycle 测试的更多内容：https://t.co/OXmtODyTKj 我已将源文件上传至此，可在浏览器中直接运行、可进行 Fork 等操作：https://t.co/w3Nctc888d 请注意 GTA Hobbiton 将在 GTA VI 发布前上线 :)" / X

Andrej Karpathy

@karpathy

Aug 2

我们开始进入一个需要更复杂方式测试 LLM 的领域，例如通过 "生成 pelican 骑自行车的 SVG 图像" 这类任务。作为一项泛化尝试，我很好奇如果给 Opus 5 提供《指环王》的第一段文字、100万 token 的预算（约 10 美元）并要求它

显示更多

$

00:00

/$

1.5K

2.1K

28K

4.6M