英伟达团队基于 MiniMax H3 开源视频增强方案,最高支持 4K 重生成
TL;DR · AI 摘要
英伟达与MIT团队开源基于MiniMax H3的视频增强方案,支持4K重生成,推理速度提升3.9倍。
核心要点
- Open-H3-Regenerate-2K项目支持2K至4K视频重生成,推理速度达原实现的3.9倍
- 使用潜空间放大器和SoL-Engine技术,视频解码耗时从15秒降至1.6秒
- MiniMax H3模型开源后一个月下载量超2400万次,衍生模型超300个
结构提纲
按章节快速跳转。
英伟达与MIT团队在Hugging Face发布Open-H3-Regenerate-2K项目。
基于MiniMax H3模型,采用LoRA细化和潜空间放大技术实现4K重生成。
结合SoL-Engine稀疏注意力和快速VAE解码器,推理速度提升3.9倍。
在RefinerBench-150测试中,感知质量得分60.0优于官方API的53.4。
- ›社区影响
H3模型开源后一个月下载量超2400万次,衍生模型达300个。
思维导图
用一张图看清主题之间的关系。
查看大纲文本(无障碍 / 无 JS 友好)
- 视频增强方案
- 技术架构
- MiniMax H3基础模型
- LoRA细化模块
- 潜空间放大器
- 优化方法
- SoL-Engine稀疏注意力
- 快速VAE解码器
- 测试表现
- 推理速度3.9倍提升
- UniPercept得分60.0
金句 / Highlights
值得收藏与分享的关键句。
通过潜空间放大器和SoL-Engine技术,视频解码耗时从15秒降至1.6秒
Open-H3-Regenerate-2K在UniPercept测试中得分60.0,优于官方API的53.4
MiniMax H3模型开源后一个月下载量超2400万次,衍生模型达300个
英伟达团队基于 MiniMax H3 开源视频增强方案,最高支持 4K 重生成 – 量子位
扫码关注量子位
<div class="top_search"> <form role="search" method="get" class="search-form" action="https://www.qbitai.com/" id="search"> <label> <input type="search" class="search-field" placeholder="搜索…" value="" name="s"> </label> <button type="submit" class="search-submit"></button> </form> </div>
< img id="wx_img" src="https://www.qbitai.com/wp-content/uploads/imgs/qbitai-logo-1.png" width="400" height="400">
articlead begin
articlead end
英伟达团队基于 MiniMax H3 开源视频增强方案,最高支持 4K 重生成
量子位的朋友们
2026-10-30
15:31:11
来源:
量子位
摘要样式
英伟达与麻省理工学院团队,在 Hugging Face 发布了视频增强项目 Open-H3-Regenerate-2K 的模型权重
近日,由英伟达与麻省理工学院研究人员组成的 Efficient-Large-Model 团队,在 Hugging Face 发布视频增强项目 Open-H3-Regenerate-2K 的模型权重,配套推理代码已在 NVlabs/Sana 仓库开放。该方案基于 MiniMax H3,将低分辨率视频草稿重新生成为高分辨率视频,支持 2560×1440 的 2K 输出,最高可实现 3840×2160 的原生 4K 重生成。
MiniMax H3 的完整系统包含多模态上下文处理、基础音视频生成和高分辨率重生成等环节。其中,已开放权重的 H3-Base 负责生成 768P 音视频,官方 H3-Regenerate-2K 模块通过 API 提供服务。此次发布的项目复用 H3 基础模型的生成能力,为高分辨率重生成环节提供了一套可自行部署的开放实现。
在细化模型的训练阶段,研究团队保持 H3 Transformer 主干与视频 VAE 的原有参数不变,仅训练新增的细化 LoRA。推理时,细化 LoRA 与 LightX2V FL2VA Turbo、LMS Sharp 等社区适配器合并使用,通过三步去噪,在目标分辨率下重新生成画面细节。视频草稿中的场景、布局和运动信息,则为这一过程提供基础。
为提高推理效率,项目采用社区开发的潜空间放大器,直接放大视频的潜在表示,减少高分辨率下重复解码、编码的开销。同时,方案结合 SoL-Engine 的稀疏注意力、低精度计算和快速 VAE 解码器,对细化与解码环节进行加速。
项目团队公布的测试显示,在单张 NVIDIA B200 GPU、预热后的测试条件下,一段约 5 秒视频的潜空间放大、三步细化和 2K 解码合计耗时,由未优化实现的 87.26 秒降至 22.45 秒,处理速度约为原来的 3.9 倍。其中,快速解码器将视频解码耗时从约 15 秒降至约 1.6 秒。
画质方面,项目团队在 RefinerBench-150 上进行了对比评测。在相同输入、相同 2K 输出条件下,Open-H3-Regenerate-2K 在感知质量评测 UniPercept 上的平均分为 60.0,官方 H3-Regenerate-2K API 为 53.4。VBench 评测中,该方案的美学质量、成像质量和主体一致性得分更高,官方 API 在运动平滑度和动态程度上仍略优。
MiniMax H3 在今年 8 月开放权重,围绕 H3 展开的微调、蒸馏和工具适配迅速增多,吸引了海内外研究团队与社区开发者参与,一个月内下载量超过 2400 万次,产生超过 300 个公开衍生模型,H3 成为 2026 年全球下载量最高的模型之一。
其中,英伟达与 MIT 联合围绕 H3 的开发覆盖了不同方向。除本次视频增强方案外,该团队还发布了基于 H3 Ref2VA 构建的流式视频渲染模型 StreamRender-H3,以及从 H3 视频 VAE 蒸馏而来的快速解码器 Sol-H3-VAE,分别面向交互式视频渲染和解码效率优化。
此前,LightX2V 推出的 MiniMax-H3 Turbo 提供四步、八步等蒸馏版本,社区微调模型 Singularity 则着重优化动作表现、面部细节与视觉风格。海外团队 FastVideo、Pika 也分别发布了 FastH3 四步预览版本和六步采样的 Pika H3 Flex;ComfyUI、Unsloth 则通过适配权重和量化版本,将 H3 带入更多本地创作工作流。
本文由MiniMax提供,量子位获授权转载,观点归原作者所有。
版权声明
版权所有,未经授权不得以任何形式转载及使用,违者必究。
MiniMax
作者文章列表
- 好莱坞最缺的答案,被这家 10 亿美元估值的 AI 影视独角兽写进了片单 2026-10-30
- 从学习人类到学习机器人同伴,清华大学联合无问芯穹、智元提出具身智能规模化落地新路径 2026-10-30
- 前排围观!MEET2027报名通道正式开启,首批重磅嘉宾已就位 2026-10-30
- 文远知行001号员工带队,景烁科技首轮融资数千万美元 2026-10-29
左侧分享
扫码分享至朋友圈
相关阅读 start
相关阅读
#### MiniMax AI超级智能体发布!编程/多模态突出,MCP工具无缝集成
无需邀请码即可试用
白交
2025-06-19
超级智能体
#### 从Token无上限到全员Agent:MiniMax的AI Native组织进化实践
与其焦虑AI,不如加入AI
梦晨
2026-05-31
#### MiniMax H3登顶开源社区第一,定义视频模型领域“斩杀线”
2026-08-06
#### 全行业都在忙着“吃虾”,MiniMax M2.7已经让虾自己拿起筷子了
大模型自我进化时代来了
克雷西
2026-03-18
#### MiniMax M3一手实测:老黄PPT上74个Logo,我以为能难住它
还能带你打卡老黄同款南锣路线
2026-06-02
#### AI Coding新王登场!MiniMax M2.1拿下多语言编程SOTA
WebDev/AppDev能力也大幅优化
2025-12-24
相关阅读 end
热门文章 start
热门文章
#### 刚刚,Anthropic公开335页招股书:史上最大IPO,史上最亏AI公司
2026-10-27
#### 国产5B生图模型海外突然爆火,4天超百万下载
2026-10-23
#### KV Cache砍掉99%,单卡吞吐飙6倍,港科CMU联手岩山科技开源新模型
2026-10-26
#### 科大讯飞首发星辰TaaS平台,让Token真正成为千行百业的生产力
#### 一张5090跑起34B实时世界模型,国产玩家拿下英伟达大奖!
<form role="search" method="get" class="search-form" action="https://www.qbitai.com/"> <label> <span class="screen-reader-text">搜索:</span> <input type="search" class="search-field" placeholder="搜索…" value="" name="s" /> </label> <button type="submit" class="search-submit"><span class="screen-reader-text">搜索</span></button> </form>
热门文章 end
底部版权
- 关于量子位
- 加入我们
- 寻求报道
- 商务合作
<a href="/?page_id=183"target="_blank"><i class="weixin_icon"></i></a>
追踪人工智能新趋势,报道科技行业新突破
<p>量子位 QbitAI 版权所有©北京极客伙伴科技有限公司 京ICP备17005886号-1</p>
量子位 QbitAI 版权所有©北京极客伙伴科技有限公司 京ICP备17005886号-1