T
traeai
登录

产品

Blackwell

别名:Blackwell GPU

NVIDIA 推出的用于高性能计算和人工智能的芯片架构。

已跟踪 6 条高相关材料

TraeAI 观察

相关材料

已收录 6 条与 Blackwell 相关的内容,按评分排序。

英伟达重新思考AI TCO:为何每Token成本才是唯一重要的指标

英伟达提出以每Token成本作为AI基础设施的核心经济指标,取代传统的算力成本或每美元FLOPS评估方式,强调全栈优化对降低推理成本、提升商业价值的关键作用。

入选理由:每Token成本是衡量AI基础设施经济效益的核心指标,直接反映实际产出效率。

精选文章#NVIDIA#AI TCO#推理优化#每Token成本中文
英伟达版「MacBook Pro」曝光:老黄自研了CPU!

英伟达版「MacBook Pro」曝光:老黄自研了CPU!

量子位1426 字 (约 6 分钟)
85

英伟达即将发布自研N1X芯片的AI原生笔记本,对标MacBook Pro,采用ARM架构+Blackwell GPU,6144 CUDA核心+128GB LPDDR5X内存,定位AI开发者与本地模型部署,但游戏性能受限且需依赖模拟转译运行x86应用。

入选理由:N1X芯片含20核ARM CPU + Blackwell GPU(6144 CUDA单元),共享128GB LPDDR5X内存

精选文章#NVIDIA#N1X#ARM架构#AI PC#DGX Spark中文
This NVIDIA remains the strongest platform for large-model inference at scale. Prefill/decode disagg...

NVIDIA 平台通过多种优化技术,成为大规模模型推理的最佳平台,显著降低服务成本并提高性能。

入选理由:NVIDIA 平台通过预填充/解码分离、Blackwell 原生量化、自定义内核和机架级 NVLink 提高了大规模模型推理的性能。

精选推文#NVIDIA#大规模模型推理#优化技术中文
Open source 🤝 NVIDIA

Open source 🤝 NVIDIA

cohere(@cohere)56 字 (约 1 分钟)
75

Cohere与NVIDIA合作,推出优化的Command A+模型,专为NVIDIA Blackwell设计,利用NVIDIA CUDA-X库进行训练。这一合作展示了开源与专有技术的结合,为AI基础设施带来了新的可能性。

入选理由:Cohere与NVIDIA的合作展示了开源与专有技术的结合。

精选推文#Cohere#NVIDIA#AI#Command A+#Blackwell#CUDA-X中文
TokenSpeed is a brand new inference engine purpose built for speed-of-light agentic workloads.  

Re...

TokenSpeed 是一个专为光速代理工作负载打造的全新推理引擎

NVIDIA AI(@NVIDIAAI)157 字 (约 1 分钟)
72

TokenSpeed 是一个专为代理型工作负载优化的新型开源 LLM 推理引擎,具备高性能 KV 缓存管理、高效调度器和跨芯片支持的模块化内核架构。

入选理由:TokenSpeed 实现了媲美 TensorRT-LLM 的性能与接近 vLLM 的易用性。

精选推文#LLM推理#NVIDIA#开源#KV缓存#注意力机制中英混合

跨材料问答 · Blackwell

回答基于:Blackwell 相关 6 条材料
    0 / 500

    AI 可能会生成不准确的信息,请核实重要内容