T
traeai
Sign in

概念

FSDP

别名:fully sharded data parallel

全分片数据并行技术,用于权重分片。

已跟踪 3 条高相关材料

TraeAI 观察

相关材料

已收录 3 条与 FSDP 相关的内容,按评分排序。

Google Developers Blog 图标

HeyGen x Google Cloud: Bringing Avatar IV to TPUs

Google Developers Blog2701 字 (约 11 分钟)
85

HeyGen与Google Cloud合作,将Avatar IV模型部署至Trillium TPU,优化后速度提升1.86倍,解决了内存限制和并行计算挑战。

入选理由:Avatar IV模型在Trillium TPU上运行速度提升1.86倍,通过FSDP权重分片和SparseCore协处理器优化。

FeaturedArticle#TPU#JAX#模型优化#Google Cloud英文
Hugging Face Blog 图标

LeRobot v0.6.0: Imagine, Evaluate, Improve

Hugging Face Blog2850 字 (约 12 分钟)
85

LeRobot v0.6.0引入世界模型策略、六项新模拟基准和CLI工具,显著提升机器人学习效率与部署能力。

入选理由:VLA-JEPA通过JEPA模型实现零成本未来预测,提升机器人决策能力

FeaturedArticle#机器人学习#Hugging Face#VLA模型#奖励模型#模拟基准英文
Optimize model training on Amazon SageMaker AI with NVIDIA Blackwell

Optimize model training on Amazon SageMaker AI with NVIDIA Blackwell

AWS Machine Learning Blog2771 字 (约 12 分钟)
85

NVIDIA Blackwell GPU与Amazon SageMaker AI结合,显著提升大规模AI模型训练效率,减少内存限制和通信开销。

入选理由:Blackwell的180GB内存和新型精度格式可减少内存压力,支持更大批次和更长序列。

FeaturedArticle#Amazon SageMaker#NVIDIA Blackwell#AI训练#机器学习英文

跨材料问答 · FSDP

回答基于:FSDP 相关 3 条材料
    0 / 500

    AI may generate inaccurate information. Please verify important content.