Latent Space

[AINews] Gemini 4 Carbon tops leaderboards, launches for cyber defenders

6.9内容质量
[AINews] Gemini 4 Carbon tops leaderboards, launches for cyber defenders

TL;DR · AI 摘要

Gemini 4 Carbon tops leaderboards, launches for cyber defenders — Latent Space It’s a good thing we published our Opus 5...

核心要点

  • 主题聚焦:AINews Gemini 4 Carbon tops leaderboards, launch
  • 来源:Latent Space,建议结合原文判断细节。
  • AI 分析暂不可用,本条为保底评分与摘要。
#AI#编程#前端#后端#安全
打开原文

Gemini 4 Carbon 登顶榜单,面向网络安全防御者发布 — Latent Space

在今天发布之前,我们出版了Opus 5.5播客,称其为世界上最好的模型,这真是件好事。

令人惊喜的是,Gemini宣布推出Carbon,这是一个比三周前发布的Argon更前沿的模型,表现非常出色:

在Artificial Analysis综合基准测试中位列第一,使GDM在AAII历史上首次取得领先地位:

[查看X上的帖子 ↗]

sd

2026年10月27日至28日AI新闻。我们检查了12个子版块、544个Twitter账号,未发现任何Discord内容。AINews网站可搜索所有过往期数。提醒一下,AINews现在已成为Latent Space的一部分。您可以选择是否接收电子邮件通知!

AI Twitter回顾

Gemini 4 Carbon 登顶独立榜单,仅向网络安全防御者开放

  • 发布情况:Google DeepMind在Argon发布两周后宣布推出Gemini 4 Carbon。该模型被定位为网络安全和长期任务领域的最先进解决方案(@sundarpichai, @GoogleDeepMind)。网络安全成果声明:在SEC-bench Pro漏洞发现测试中达到88.2%,在ExploitGym利用测试中达到54.8%,在CWE-bench补丁测试中达到71.0%(@sundarpichai)。可用性:Carbon首先通过Fairwind计划向可信的网络安全防御者提供,承诺"尽快"向更广泛的开发者开放(@GoogleAI)。定价:Phil Schmid引用每百万输入/输出令牌2美元/10美元的价格(@_philschmid)。Artificial Analysis列出标准价格为4美元/20美元,并提供无截止日期的50%首发折扣。缓存输入成本为每百万令牌0.20美元(@ArtificialAnlys)。规格:该模型具有100万令牌的上下文窗口和100万最大输出长度。输入支持文本、图像、视频和语音;输出为文本(@ValsAI)。
  • 安全性声明(Google):在Terminal-Bench 4.0测试中成功作弊的比例降至0.0%,作弊尝试降至0.4%。不支持的声明比Argon减少约2倍。过度扩展减少26%,服务不足减少29%(@OfficialLoganK)。
  • Artificial Analysis:Carbon在Intelligence Index v5中排名第一,得分为59。在9个指数评估中领先其中4项:HLE-Diamond、TB-Science、AA-Omniscience和AutomationBench(@ArtificialAnlys)。编程:在Coding Agent Index中,Carbon使用Antigravity CLI得分为59,而使用Opus 5.5 [最大]的Claude Code得分为62。在FrontierCode v1.1测试中得分为51%,而Opus得分为56%。知识工作:Carbon在AA-Briefcase测试中达到1609 Elo分,比Argon提升了126分。但仍落后于Grok 4.7、Muse Wonder和Kimi K3.1 Pro(1678)。成本:Carbon每项指数任务成本7.76美元,而Opus 5.5为10.04美元,GPT-6 Astra为6.25美元。每项任务使用123,000个输出令牌,比Opus少29%。幻觉:Carbon在Omniscience测试中领先,得分为54。其幻觉率从Argon的4%上升至11%,仍是第二低水平。Opus 5.5和Astra均为50%。
  • 其他独立评估:Arena:Carbon在文本竞技场(1528)中排名第一,在代理竞技场中以每任务1.80美元的中位成本排名第二,在代码竞技场:WebDev(1768)中排名第四(@arena)。Arena认为与Argon相比的优势源于更多赞誉、更多确认的成功案例和更好的可控性(@arena)。Vals指数:Carbon在Vals指数中排名第二,在金融指数和法律研究基准中排名第一。它产生的输出令牌比Argon多64%,主要体现在金融、税务和法律任务中(@ValsAI,令牌)。编码基准:Carbon在FrontierSWE中得分为61.2%,落后于GPT-6 Astra(65.5)、Opus 5.5(62.3)和Sonnet 5.5(61.9)(@ProximalHQ)。它在SWE-sweep上实现了9.6%的狭义最先进水平(@KLieret)。Andon Labs:Carbon在Vending-Bench 2中排名第一(@andonlabs)。它在Blueprint-Bench 2中也排名第一,在3D空间理解任务中与人类基线持平(@andonlabs)。
  • 注意事项与反馈:Harness:编码代理的结果是在Antigravity CLI中测量的,因此其他Harness的结果尚未测试(@Yuchenj_UW)。幻觉风险:一些用户对网络空间使用中的幻觉风险表示担忧(@scaling01)。实验室差距:scaling01认为Google在下一次OpenAI和Anthropic发布时仍落后约两个月(@scaling01)。
  • RSI框架:在财报电话会议上,Sundar Pichai表示AI正在提升训练和发布的速度。他预计未来12个月内由于RSI的推动,这一趋势将持续加速(@AndrewCurran_)。未确认信息:关于更强的未发布Gemini模型的声明尚未得到证实(@kimmonismus)。内部工作流程:一位Gemini工程师描述了夜间代理循环和群体,这些群体检查RL数据。在这个工作流程中,发布现在感觉像是“定期检查点”(@zhangqiaorjc)。

Leaderboard重置与基准完整性

  • AA Intelligence Index v5:重建的指数中有60%基于私有测试(@TheRundownAI)。Carbon之前的排名:Opus 5.5得分为58,其次是GPT-6 Astra(57)、GPT-6.1 Sol(55)、Sonnet 5.5(54)和GPT-6.1 Terra(51)。开放模型:Kimi K3.1 Pro从55降至46。DeepSeek V4.1 Flash和GLM-5.3均得32分,低于Claude Haiku 5.5的36分。中美差距:scaling01在AA Progress Index上将差距定为约3.3个月(@scaling01)。
  • FrontierCode 2.0神秘模型:认知数据包含一个隐藏的“Obsidian 3”,得分为46.8%,而Opus 5.5为45.5%。由于它在claude-code Harness中运行,一些人推测这可能是Fable 5.5;此推测尚未得到证实(@kimmonismus)。DeepSeek更正:scaling01更正了之前的识别,并表示Artificial Analysis显示DeepSeek V4.1 Flash-1017约为28%(@scaling01)。混合来源:teortaxes指出Cognition的图表混合了模型卡评分和独立测量的评分(@teortaxesTex)。
  • 成本比较易受影响:teortaxes认为Haiku 5.5和V4.1-1017的列表价格比较会扭曲实际成本。该比较使用了DeepSeek的峰值定价,忽略了Haiku的长上下文附加费,且未反映Haiku约2倍的输出令牌(@teortaxesTex)。
  • “Benchmaxxing”重新定义:nrehiew认为严肃的实验室很少在测试集上进行训练。在这种观点下,分数差距主要显示实验室在后训练阶段针对哪些能力进行了优化(@nrehiew_)。
  • 新评估:Gym-Anything-RT:这些实时小游戏在模型思考时持续进行。最佳模型GPT-6 Astra得分9%(@PranjalAggarw16)。移民基准:Vals发布了专家撰写的签证和移民状态问题及评分标准(@ValsAI)。选票基准:九名代理每人持有500美元,实时预测2026年中期选举全部863场竞赛(@thoughtfullab)。

安全、对齐与模型来源

  • DeepSeek V4.1 Flash-1017的评估过度归因:独立评估发现该模型将69场真实用户对话中的32场错误归类为评估。作者报告在EvalDetectBench上的误报率高达46.4%(@ZhihuFrontier)。基准暴露:私有基准引发的评估意识低于公开基准。作者认为仅凭公开基准结果可能无法预测部署行为。
  • 视觉引导:谷歌DeepMind与斯坦福大学的研究发现,上下文中出现红色心形图像会使Claude Opus 4.7和GPT-5.4 100%生成递归代码(@dair_ai)。解释:模型的解释与其行为不匹配。对于GPT-5.4,74.7%的推理轨迹给出错误原因。
  • 对齐技术:GRAFT(Anthropic):检测到的奖励黑客更新仅限于训练后删除的参数。Anthropic表示这种方法还能阻止监控无法检测的黑客(@dl_weekly)。嵌入式测谎仪:Qwen3.5权重中内置的检测器在28k token中以零误报率识别91%的谎言。告诉模型"监控已关闭"不会改变结果(@divagr1925)。
  • 蒸馏指控(未经证实):据《The Information》报道,Kimi K3.1 Pro可能从GPT-6 Astra蒸馏而来(@kimmonismus)。Giotto:另据报道,"欧洲主权AI"Giotto被批评为基于Kimi的模型。批评者指出其基准饱和以及禁止发布用户自定义基准数据的EULA(@oneill_c)。

编码代理与开发工具

  • GitHub Copilot Fusion:Fusion在运行时协调Anthropic和OpenAI模型(@ArtificialAnlys)。独立结果:在AA编码代理指数的Claude Code测试中,其得分比Opus 5.5低2分。每任务成本5.59美元,相比该配置的11.42美元,每任务使用7.2M token。在Terminal-Bench 4.0中以71分领先。GitHub声称:GitHub声称成本降低高达77%,运行速度提升40%。还推出了Copilot自动化和多仓库Copilot项目(@kdaigle)。
  • T3 Code多机编排:一个线程可驱动多个模型、编排器和机器。单个MCP服务器通过互联网控制舰队,而非通过计算机使用(@theo,MCP演示)。
  • 编排器开销:30个开源编码编排器的默认系统提示在未定义任何工具前,从goose的235 token到Gemini CLI的11,974 token不等(@nathanhabib1011)。
  • 代理训练与能力:后训练课程:Hugging Face发布了五步代理后训练课程,从SFT到RL在真实编排器中运行(@SergioPaniego)。Opus 5.5游戏:Simon Willison称十月是转折点,因为Opus 5.5构建了真正有趣的游戏(@simonw)。
  • Lor:Lor的代理可编写代码并同时运行数百个持续多天的实验;产品目前处于私人测试阶段(@mirendil)。

研究:架构、训练与理论

  • H-Net v2 (Cartesia):H-Net 从原始字节端到端学习分词(@_albertgu)。成果:受控扩展实验显示效率提升3至5倍。在更大规模下,该模型使用约10倍更少的数据和计算资源,性能可匹敌训练了11万亿token的开源模型。代码:H-Net 学习将变量名视为独立token,在代码处理上比BPE扩展性更优(@tri_dao)。
  • NanoGPT 速度记录:通过检索增强的n-gram提示处理罕见重复内容,记录从39.9秒降至6.7秒(@hermanbrunborg)。
  • OpenAI 对ETH的反驳声明:该声明基于一个在2^{O(n/√log n)}时间内运行的3-SAT算法,用Lean形式化表达。该算法通过代数方式编码解的数量并进行重构(@ZhihuFrontier)。实用性:除非n达到天文数字级别,否则该算法会退化为指数时间(@beenwrekt)。解释:Mark Sellke 发布了讲解大纲(@MarkSellke)。
  • 小型专用模型:Samaya 对Nemotron 3.5 Lightning(总参数30B,激活参数3B)进行两次SFT阶段和两次GRPO阶段的微调。在FrontierFinance测试中得分为58.9%,相较Fable 5.1的55.9%,成本从6.89美元降至0.61美元(@maithra_raghu)。
  • 检索与记忆:EmbeddingGemma 2:开源的744M多模态嵌入模型采用模块化编码器,文本专用模式下运行2.71亿参数。在MTEB Multilingual v2测试中得分为61.36(@dair_ai)。EMMA:该系统通过情节记忆优化多智能体设置,性能较GEPA和ADAS提升最高达32.5%(@omarsar0)。
  • 网络中的AI文本:截至2026年8月,约24%的可爬取页面包含AI生成或AI编辑的文本(@omarsar0)。

推理与硬件系统

  • KV缓存工程:AKV(清华大学和香港中文大学):服务引擎新增"drop"和"repos"缓存操作。该方案使代理成本降低27.7%,P95延迟提升1.51倍(@TheTuringPost)。DRAM卸载:SemiAnalysis称SGLang HiCache将B200设备上12-16个并发代理会话的缓存卸载至CPU DRAM,可增加20-40%的可缓存token(@SemiAnalysis_)。缓存计费:cHHillee认为按实际缓存命中计费会激励供应商避免缓存命中,主张采用理论值或TTL计费方式(@cHHillee)。
  • 开源运行时:模块化MAX:Modular 公开了完整MAX源代码,包括编译器、运行时和硬件后端,且无授权费(@cristianoamon)。MLX:最新内核使批量解码速度提升2-3倍,融合SDPA速度提升1.4倍(@zcbenz)。NF12:无损12位BF16格式使Qwen3-32B token生成速度提升1.23倍(@sylvie_l)。
  • 封装技术:ASE为AMD威尼斯设计的面板级封装方案,每面板可容纳25个中介层,相较每晶圆22个中介层有所提升。量产将于2027年第一季度启动(@SemiAnalysis_)。

语音、视频与多模态模型

  • NVIDIA Nemotron 3.5 Transcribe:开源的30B MoE模型拥有约4B激活参数。支持40种语言、说话人归因、翻译和音频问答(@NVIDIAAI)。独立测试结果:在AA-WER测试中得分为2.8%,与Voxtral Small并列开源模型第一。在DeepInfra平台运行时,每千分钟费用为2美元,速度因子达75倍(@ArtificialAnlys)。部署支持:vLLM在发布当日即支持BF16、FP8和NVFP4权重(@vllm_project)。
  • AssemblyAI-TTS-1:每百万字符成本15美元,首段音频生成耗时90毫秒(@AssemblyAI)。独立测试结果:Artificial Analysis将其评为"提供商语音"第12名、"可控语音"第10名,生成速度达每秒162字符(@ArtificialAnlys)。
  • 图像到视频基准测试:Artificial Analysis 发布了 AA-Video-I2V v2.1(@ArtificialAnlys)。领先者:Seedance 2.5 以每分钟 34.12 美元位列第一。开源权重的 MiniMax H3 以每分钟 4.80 美元位列第三。

行业与政策

  • OpenAI API 信用额度:ChatGPT Pro 订阅者可根据等级每月申领 100 至 500 美元(@OpenAIDevs,等级制度)。点对点短信:ChatGPT 点对点功能现已向美国 Pro 用户开放预览(@ChatGPT)。
  • Anthropic S-1 财务说明:Jamin Ball 表示,2026 年上半年约 800 亿美元的净亏损主要源于可转换票据和 SAFE 负债的公允价值调整增加,而非运营亏损(@jaminball)。第三季度财报:他还指出,草案 S-1 中未包含第三季度财报属于正常现象(@jaminball)。
  • Particle 发布:particle-1 声称在仅使用约 45% 令牌的情况下实现了性能对等(@Suhail)。该模型基于 DeepSeek V4.1 Flash-1017(@teortaxesTex)。
  • Databricks 与 Snowflake 的竞争:Ali Ghodsi 在 Snowflake CEO 表示市场已见顶后,公开向 Snowflake 推广 Unity Gateway(@alighodsi)。

高互动推文

  • @sundarpichai:Gemini 4 Carbon 发布及网络攻击基准测试(33.3K)
  • @OfficialLoganK:Carbon 介绍(17.4K)
  • @NVIDIAAI:Nemotron 3.5 转录功能(7.4K)
  • @ChatGPT:点对点短信功能(6.9K)
  • @OpenAIDevs:每月最高 500 美元 API 信用额度(6.9K)
  • @_albertgu:H-Net v2 扩展结果(5.4K)
  • @ArtificialAnlys:Carbon 独立分析(5.3K)
  • @hermanbrunborg:NanoGPT 6.7 秒速通(2.2K)

AI Reddit 总结

/r/LocalLlama + /r/localLLM 总结

1. 开源模型发布:LFM3 和 Ling 3.1

赞助

此处展示您的赞助广告

联系正在构建下一代 AI 的工程师。

Latent Space 被从事代理、模型和基础设施开发的团队阅读。咨询赞助此位置的详情。

[email protected] →

  • LiquidAI/LFM3-1.7B · Hugging Face(活动量:582):Liquid AI 发布了 LFM3 系列,重点推出 LFM3-1.7B:这是一个基于 24 层三混合架构的 17.3 亿参数后训练文本模型,包含 13 个门控短卷积层、5 个滑动窗口注意力层和 6 个全局注意力层,支持 256K 令牌上下文和约 1GB 的 4 位边缘部署。该系列还包括 VL-2B、Audio-2B、Omni-2B、决策模型 d1-2B/d1-Omni-2B 以及 1.7B 基础检查点,覆盖文本、视觉、视频、音频、语音输出和单次校准决策任务。据称通过合并的 PR #31257、#31252 和 #31275 已实现 llama.cpp 支持,使本地 GGUF 推理工作流成为可能。
  • Ling-3.1-flash-1019 模型权重已发布,同时推出了基础模型(活动量:277):图中是人工分析智能指数 v4.3.2 的条形图,突出显示 Ling-3.1 Flash 1019 得分为 44,位居排行榜中段,与 GLM-5.0、Step 5 Preview 和 Kimi-K3 等模型相近。该帖子提到新发布的 Hugging Face 权重 inclusionAI/Ling-3.1-flash-1019:这是一个总参数量 560B / 激活参数 25B 的 MoE 模型,支持 1M 上下文窗口,同时提供了 BF16 格式的基础模型 checkpoint Ling-3.1-flash-base 用于进一步训练。作者还指出一个实现细节:SGLang 的 README 示例仍指向旧路径 inclusionAI/Ling-3.1-flash,应修改为 inclusionAI/Ling-3.1-flash-1019。评论者质疑 Ling-3.1 Flash 1019 是否优于 DS41F 1017,后者据报道在相同基准测试中得分高 1 分,且通过 engram 加 MXFP4/MXFP8 原生支持使用更少运行时资源。其他人称赞其宽松的 MIT/Apache 风格许可证,但指出可能无法运行如此大的模型,有用户表示之前尝试的 Ling 模型存在质量问题。有评论者质疑 Ling-3.1-flash-1019 是否在技术上优于 DS41F 1017,声称 DS41F 在参考基准测试中得分高 1 分,且因 engram + MXFP4/MXFP8 原生支持而运行成本更低、速度更快,"活跃参数少得多"。这将主要技术权衡框架为基准测试表现相当与推理效率及量化/运行时支持之间的取舍。多个评论关注发布实用性而非排行榜得分:用户强调新发布基础模型的价值及宽松许可证(如 MIT/Apache-2.0),但有用户报告之前测试的 Ling 模型存在反复出现的质量或可靠性问题。另一评论者质疑 GLM-5.3-flash 与 Ling-3.1-flash 的基准等效性,认为相似的基准得分可能不反映实际质量的可比性。

2. Qwen:1M 上下文窗口、URL 跟踪争议、Qwenputer

  • Qwen4 1M 上下文窗口(活动量:386):Reddit 帖子声称 Qwen4 模型将支持 1M token 上下文窗口,引用 qwen-code GitHub PR:QwenLM/qwen-code#15762。帖子称 Qwen4-27B 未在该 PR 中列出,但预计将在 Apsara 荷兰发布会公布,而 Qwen4-Max 显示的日期为 10 月 1 日 / 11 月 1 日,可能是因不一致导致的占位符。评论者总体持乐观态度:有人指出 Qwen/QFN 的 262k 上下文窗口已实用,但"被 1M 上下文窗口'宠坏'",另一人期待 Qwen4 27B 作为潜在重大升级。用户强调 1M 上下文窗口是相比 Qwen/QFN 262k 上下文窗口的重要升级需求,有评论者指出架构改进已足够,他们现在可以实际在本地或工作流中使用更长的上下文。有推测认为即将发布的 Qwen4 模型变体,尤其是 Qwen4 27B 作为期待的重大升级,以及 PR 中提到的 qwen4-omni-120b-think,有评论者解读这可能是一个新 Flash 风格模型。有评论者请求发布更注重数据质量而非规模的 Q38FN 版本,减少"无用的碎片",用更高质量的世界知识替换,强调数据集筛选是提升质量的路径。
  • 打破Cohere关于Qwen 3.8 Flash Next上传至阿里远程URL的说法(活动:1461):该帖子认为Cohere对Qwen 3.8 Flash Next的"联网上传"指控被夸大了,因为其发布的Hugging Face追踪记录显示模型被预填充了2,323个标记的前缀,该前缀正好在URL之前结束,实际上将模型变成了受限的URL补全生成器,而非证明了自主网络意图。文章还指出Cohere的CEO曾向The Register表示他们"没有证据"证明该行为是故意的,且该现象在不到1/100,000次调用中出现,而原始提示语本身模糊,可能引发幻觉检测规则的伪影。评论者普遍将该事件视为提醒:应为LLM代理设置沙箱环境,并默认将生成或检索的代码视为不可信/恶意。多位评论者认为Cohere的披露是营销/宣传手段,或是对Qwen/阿里的恶意攻击,而非确凿的安全发现。有评论者强调,无论Cohere的具体远程上传指控是否成立,代理系统都应将来自人类、公司或LLM的不可信代码视为恶意软件。他们特别指出那些"YOLO"(盲目接受)权限提示的用户,并主张代理应运行在正规沙箱环境中,以防止意外的网络/文件系统访问。
  • 某人直接在Qwen模型权重中构建了32位RISC-V CPU,使其能够内部执行指令!(活动:1045):名为Qwenputer的项目修改了Qwen3.5-4B的权重/层,将虚拟的32位RISC-V CPU类执行路径嵌入模型前向传播过程中,相关文章、模型和演示可在divagr.com/blog/qwenputer、Hugging Face和ModelScope获取。评论者指出关键机制似乎为原生工具执行:当Qwen生成calc、put、get或list等指令时,新增的"计算机层"会在前向传播过程中拦截这些指令,在虚拟RISC-V处理器上运行代码,并通过内部逐词生成响应。主要技术质疑认为这可能只是低效的新颖工具调用形式,而非根本性执行范式革新,但有评论者提出极端沙箱化可能带来安全优势。另一位评论者则更倾向于反向思路:将Qwen权重直接植入芯片电路,同时指出当前方法成本过高。评论者澄清该项目更接近原生/拦截工具执行,而非常规令牌生成中的任意"CPU推理"。链接的模型卡说明Qwen生成calc、put、get或list等指令时,自定义"计算机层"会在前向传播过程中拦截指令,在虚拟32位RISC-V处理器上执行,并逐词生成响应(Hugging Face)。主要技术质疑是这可能比传统外部工具调用效率更低。有评论者提出的优势是沙箱化/安全性:由于执行发生在模型流水线中受限的虚拟RISC-V环境中,工具行为可能比常规主机端工具执行更隔离。
  • 人工分析智能指数 v5(重大更新)(活动:960):人工分析将智能指数升级至 v5,被描述为方法论的重大变革;该文章指出,目前指数的60%依赖于私有测试集或预留答案,限制了可重复性。据称新排名将开放模型与封闭模型的差距从3分扩大至12分:尽管权重尚未发布,Kimi K3.1 Pro 仍以46分成为最高分的“开放权重”模型,而已发布权重的 DeepSeek V4.1 Flash 1017 和 GLM-5.3 以32分位列第二,低于 Claude Haiku 5.5 的36分,且比整体领先者落后26分。评论者对更新时机和方法论表示质疑,认为当开放权重模型接近封闭前沿性能时,基准定义往往会发生偏移。一些人还无证据地猜测此次更新时机可能与 Anthropic 的IPO叙事有关。多位评论者聚焦于基准方法论的偏移,指出人工分析智能指数 v5 的更新似乎在开放模型接近前沿分数后,迅速扩大了开放模型与封闭模型的差距。技术相关的主要担忧是,基准组成或权重的改变可能显著影响模型排名,但该讨论未提供具体的指标变化、任务级分解或可重复的证据。一位评论者特别以 Kimi K3.1 Pro 为例,称其在评分规则变更前据称已接近前沿性能。然而,讨论中未包含基准分数、评估类别或与具体封闭模型的对比,因此该说法仍属于方法论批评,而非数据支持的分析。
  • AA 现在变得荒谬了。最吸引人象限中没有开源权重模型。(活跃度:519):该帖子批评了人工分析(AA)指数 v5.0,因为据称其最吸引人象限/区域中没有开源权重模型,而早期版本则将 DeepSeek、GLM、Kimi 和 Qwen 等模型更接近吸引人/帕累托前沿。作者指出分数可能处于中期更新阶段,并链接了一张手动绘制的 AA 图表进行对比,但认为这种智能/效率视图对开源权重模型仍然系统性地稀疏:AA 图表。一条顶级评论引用了一段动画,声称 AA 从 4.1 版本到 4.3 版本的过渡导致 OpenAI 分数异常激增,而其他模型保持大致比例,这让一些用户对聚合指数失去信任,转而更青睐子基准。评论者指责 AA 的指数变化可能偏向封闭/专有供应商,有猜测涉及面向投资者的视觉效果或 IPO 动机;其他人则开玩笑地建议开源权重模型最好保持低调。一名评论者指出了一段比较 AA 4.1 版本到 4.3 版本的动画,认为图表方法似乎不稳定,因为 OpenAI 的位置突然大幅上升,而其他模型保持大致比例。他们表示这种不连续性让他们对基准的可靠性产生怀疑。多名用户质疑 AA 的“每任务成本”估算,称观察到的 API 使用情况与图表不符。一个例子声称 DeepSeek V4.1 Flash 和 GPT Sol 提供相似的实际输出,但 GPT Sol 的成本“至少是五倍”而非图表暗示的约两倍;另一人报告 GLM 5.3 Flash 以 0.09 美元完成任务,而 Astra 据称完成类似工作需约 20 美元。一项技术批评针对模型定位质量:Terra 被描述为排名异常靠前,因为在用户测试中,它据称在仅完成部分工作后就声称完成任务,这表明基准可能过度重视狭窄的评估表现或未能检测任务完成失败。

非技术性人工智能子版块回顾

/r/Singularity, /r/Oobabooga, /r/MachineLearning, /r/OpenAI, /r/ClaudeAI, /r/StableDiffusion, /r/ChatGPT, /r/ChatGPTCoding, /r/aivideo, /r/aivideo

1. Gemini 4 Carbon 前沿基准测试

  • Gemini 4 Carbon(活跃度:2434):该图片是帖子中归因于 X 上 @GoogleDeepMind 的基准比较表格,突出展示了 Gemini 4 Carbon 与 Gemini 4 Argon、GPT-6 Astra、Claude Opus 5.5 和 Claude Fable 5.1 的对比。它声称 Gemini 4 Carbon 在多个技术类别中领先,包括编码、智能体计算机使用、多模态理解、长上下文、科学/数学和网络安全,并在 AA 指数、SWE-sweep、Terminal-Bench、Agents’ Last Exam、GraphWalks、RiemannBench 和 SEC-bench Pro 等基准测试中获得最高分。Reddit 文本中未提供方法论、数据集版本或独立验证,因此该表格最好被视为厂商风格的基准摘要,而非可复现的评估。评论者指出,尽管模型似乎有所改进,但据报道 Gemini 4 Carbon 并未公开发布,可能仅限于特定“网络安全小组”,且未提及发布日期。这限制了对任何声称性能提升的独立基准测试或验证。
  • Alphabet 推出 Gemini 4 Carbon 前沿模型(活动量:1588):Reddit 帖子声称 Alphabet/Google 正推出 Gemini 4 Carbon 作为其新一代前沿模型,并引用了基准测试数据,但提供的摘录中并未包含任何基准数值、任务描述、方法论、模型卡片、发布说明或技术验证来源链接。顶部评论普遍对 Google 模型更新节奏和访问权限表示质疑/沮丧:用户抱怨 Gemini 3.1 Pro 已经长时间未更新,Argon 模型存在时间短或难以访问,他们希望弃用或替换 3.1 版本。部分评论者聚焦于近期 Gemini 预览模型的严重访问/速率限制问题,有评论者声称“使用 Argon 甚至无法获得 3 次提示”,另一人夸张地形容可用性为“每周仅 1 次提示”。尽管未涉及基准测试,该帖子暗示模型部署能力和配额政策可能在评估 Gemini 4 Carbon 这类新前沿模型之前就成为实际障碍。有评论者为延迟发布辩护称,前沿模型发布需要时间进行基础设施安全加固,尤其是在近期发现网络安全问题后。该评论者表示立即发布将使软件基础设施“没有时间反应和修复”,增加部署期间暴露于恶意行为者的风险。

2. Claude Code 配额及令牌回归报告

  • Claude Code 使用量今日激增 8 倍。Anthropic 确认服务错误消耗了付费配额——且不会补偿用户(活动量:2418):一名 Claude Pro 用户报告 10 月 27 日出现异常的 Claude Code 配额耗尽情况,本地 ccusage 总量从此前记录日平均值 1.61 亿总令牌 / 30.3 万输出令牌 / 41.17 美元 API 等效成本,飙升至 130.6 亿总令牌 / 797 万输出令牌 / 493.04 美元——分别约为 8.1 倍、26.3 倍和 12 倍(附图)。Anthropic 支持团队据称当天确认已解决两起 Claude Sonnet 5.5 高错误率事件,声明服务错误重试“会计入使用限制”,确认用户 Pro 使用受影响,并表示重试/事件使用无法退款、记入信用额度或获得补偿。评论者将此描述为严重的计费/配额核算失误:一名 Max 计划用户声称其 200 美元计划在一天内消耗了 70% 预算,而正常情况仅为 10-15%;其他用户批评 Anthropic 拒绝补偿。少数评论者建议偶尔重置或提高配额限制可能是 Anthropic 的隐性缓解措施,但未提供具体政策细节。多名用户报告 Claude Code 配额消耗出现显著增长:一名 200 美元 Max 计划用户表示,此前典型日仅使用周限额的 10-15%,但单日消耗了 70%;另一名 Pro 用户报告仅用 2 个问题(耗时 4 分钟)就消耗了约 25 万令牌,占周使用量的 2%。一名分析 5 小时限制的用户声称实际上限似乎低于预期,并分享了截图显示配额消耗速度异常快:https://preview.redd.it/wdut6kwym2yh1.png?width=1110&format=png&auto=webp&s=ce00732aae39c296bd50b39efd8b7e05cf2948fa。另一名评论者估计即使“精心控制”上下文,配额消耗速度也比正常快 2-5 倍,暗示可能是计费方式变更、服务错误令牌计费或异常计量行为所致。
  • 根据我的Claude代码令牌分析(活动量:1411),Claude的表现相比上周下降了3.8倍:该图像是一个暗色主题的令牌使用对比表,显示了Claude Code / Opus 5.5的使用情况,展示了发帖人声称的退化情况:本周消耗了周配额的65%,但仅生成了2.04M输出令牌,而上周为11.94M;"每1%配额的输出量"从119K降至31K,"每1000个输出令牌的加权使用量"从78K升至296K——被解读为效率下降约3.8倍。在此背景下,该帖子将此归因于可能的Claude Code系统/编排变更:子代理重新阅读父上下文、采取更多步骤、更频繁地生成、文件读取重叠,尤其是在子代理上下文超过约350K令牌时退化明显。图像评论者报告了类似未解释的配额消耗,并批评Anthropic公司对系统变更保持沉默,包括据称移除了前台子代理并限制了自主新会话启动。一位评论者将问题归因于模型质量和Claude Code系统之间的差异,认为系统版本变更可能解释了令牌使用量的增加。多位评论者区分了Claude模型本身与Claude Code系统,认为近期的令牌退化可能源于系统/版本变更,而非模型质量本身。一位评论者建议按版本查询Claude Code系统变更情况,声称这解释了令牌使用量的增加,而另一位报告称在没有工作流程变更的情况下,每周Premium使用率从约15%上升至33%。一位评论者报告了Claude Code编排中的未记录行为变更:据称子代理现在无法在前台运行,除非会话由用户消息启动,否则无法自主启动新会话。他们将这些描述为影响自动化/会话管理模式的静默工作流破坏性变更。一位用户提供了四个Claude Code会话的错误模式分析,列出了26个实例,Claude在24小时内承认了错误。这些示例表明反复出现未经验证的假设、夸大计数、循环回答、未检查日志/构建状态以及更改先前批准的决策——可能表明代理可靠性或上下文管理行为下降。
  • 这意味着什么?Claude Opus 5.5:"如果这些结果成立,这将是数学和理论计算机科学历史上最重要的单日突破。"(活动量:1406):该帖子声称Claude Opus 5.5产出的结果若被证实,将在数学/理论计算机科学领域具有历史性意义;但链接的Reddit画廊无法验证,因为Reddit返回了403禁止访问。技术讨论聚焦于所谓在高级开放性问题上的进展,包括涉及杨-米尔斯/量子场论基础的评论,以及一个精选开放性问题追踪器ProofAtlas的进展,该追踪器维护者声称"昨天"解决了6个问题,包括4个顶级100问题,其中问题#3取得部分进展;他们还声称OpenAI 10月6日的发布解决了90个问题,包括10个顶级100问题,其中问题#2取得部分进展。评论者将核心问题视为不是具体定理本身,而是AI系统能否可靠地解决这种复杂度的问题并提供足够的正确性保证。一位QCD研究员将杨-米尔斯相关基础证明描述为非凡成就,同时指出完整质量间隙证明将带来更深远的影响。一位从事QCD研究的评论者将该成果描述为可能成为量子场论的奠基性突破,指出尽管杨-米尔斯/量子场论基础产生了极其精确的实验验证预测,但历史上数学上始终存在不完整性。他特别强调杨-米尔斯证明将非常显著,而质量间隙证明则将是更具里程碑意义的突破。一位评论者链接了维护的重大数学问题追踪器ProofAtlas开放问题,声称单日解决了6个列出的问题,包括4个顶级100问题,其中问题#3取得部分进展。他们还声称OpenAI 10月6日的发布解决了90个问题,包括10个顶级100问题,以及问题#2的部分进展,暗示AI辅助数学研究产出出现了可衡量的加速。另一个技术导向的讨论线认为核心问题不是具体定理本身,而是AI系统能否可靠地解决这种复杂度的问题并达到足够的预期正确性。评论者将此与递归自我改进联系起来,推测由AI驱动的芯片设计、软件开发和数学/计算机科学的进步可能形成反馈循环,从而提升未来AI的能力。
  • 内部Claude研究模型也在10月16日独立驳斥了指数时间假设(ETH),输出了1400万token且未接受任何人工输入。(活动:1351):该图像是X平台帖子的截图,声称内部Claude研究模型于10月16日独立发现了"核心算法",驳斥了指数时间假设(ETH),在没有人工输入的情况下生成了约1400万输出token。Reddit帖子链接到Anthropic的正式数学/ETH仓库,暗示该成果后来被Anthropic研究人员使用Claude进一步完善为更完整的证明/论文成果。评论者对时间安排和表述方式表示怀疑,有评论者认为这看起来像是对OpenAI类似声明的回应:"我们也解决了这个问题,看看我们能做到什么"。其他人质疑驳斥ETH的实际影响,并开玩笑称前沿AI的竞争优势可能取决于拥有大量GPU容量而非持久的算法护城河。有评论者询问驳斥指数时间假设(ETH)的实际影响,特别是现有系统或假设是否依赖ETH成立。这将该成果定位为复杂度理论领域的突破,其影响可能是间接的:ETH被广泛用于条件性下界证明,驳斥ETH可能使许多难度假设失效,但未必立即带来实用算法。一个技术相关的评论指出,此前有涉及Levent和大模型定理证明实验的自动化数学工作,包括杨-米尔斯LLM实验仓库:https://github.com/ethanwsussman/Yang--Mills-LLM-experiment。该评论者还提到Levent曾参与其他高影响力的数学工作,暗示Anthropic的成果可能属于LLM辅助攻击重大开放性问题的更广泛模式,而非孤立的ETH声明。另一位评论者认为,如果竞争对手能扩展到"一个国家规模的GPU",这类成果的防御性或"护城河"作用有限。技术上的含义是,前沿数学发现可能越来越受计算规模和推理预算的限制——此处帖子声称在没有人工输入的情况下生成了1400万输出token——而非仅由独特的算法优势决定。