T
traeai
登录
返回首页
AI Engineer视频

Running LLMs on your iPhone: 40 tok/s Gemma 4 with MLX — Adrien Grondin, Locally AI

9.0Score
可直接观看的视频资源打开原视频

视频要点

  • 实现了 40 tokens/s 的高性能推理速度。
  • 详细介绍了 MLX 框架的技术优势与实现细节。
  • 为移动端 AI 应用开发提供了新思路。

视频简介

Adrien Grondin 展示了如何利用 MLX 在 iPhone 上高效运行 LLM 模型。

#LLM#移动端#MLX

问问这篇内容

回答仅基于本篇材料
    0 / 500

    Skill 包

    领域模板,一键产出结构化笔记
    • 播客学习包

      把一集播客 / 视频提炼成可二次创作的学习笔记:关键时间点、金句、开放问题、行动项。

      • · 听后概要(3 句以内)
      • · 关键时间点
      • · 金句摘录(3-5 条)

    导出到第二大脑

    支持 Notion / Obsidian / Readwise
    下载 Markdown(Obsidian 直接拖入)