← 文章 / 行业与公司动态
Latent Space 11天前 · 2026-10-30 03:47:00 · 13 阅读

Gemini 4 Carbon 登顶排行榜,为网络防御者而生

幸好我们赶在今天发布之前,在 Opus 5.5 播客里称它为全球最强模型。

惊喜来了:Gemini 发布了 Carbon,比三周前的 Argon 更新的前沿模型,跑分相当亮眼:

直接登顶 Artificial Analysis 综合榜单第一,让 GDM 或许首次在 AAII 历史上领跑:

View post on X ↗

sd

2026年10月27日至28日的 AI 新闻。我们浏览了 12 个 subreddit、544 个 Twitter 账号,未涉及其他 Discord。AINews 网站支持搜索全部往期内容。提醒一下,AINews 现已成为 Latent Space 的一个栏目,你可以自行选择邮件推送频率!


AI Twitter 回顾

Gemini 4 Carbon 登顶独立榜单,目前仅向网络防御者开放使用

  • 发布:Google DeepMind 在 Argon 发布仅两周后推出了 Gemini 4 Carbon。该模型主打网络安全和长时程任务上的最先进表现(@sundarpichai、@GoogleDeepMind)。

    • 网络安全成果:在 SEC-bench Pro 漏洞检测任务中得分为 88.2%,在 ExploitGym 漏洞利用任务中得分为 54.8%,在 CWE-bench 补丁修复任务中得分为 71.0%(@sundarpichai)。

    • 可用性:Carbon 首先通过 Fairwind 计划向受信任的网络安全防御者提供,并承诺“尽快”向更广泛的开发者开放访问(@GoogleAI)。

    • 定价:Phil Schmid 提到输入每百万 token 费用为 $2,输出为 $10,并附有星号备注(@_philschmid)。Artificial Analysis 列出的标准价格为输入 $4/输出 $20,享有 50% 的发布折扣且无截止日期;缓存输入费用为每百万 token $0.20(@ArtificialAnlys)。

    • 规格:该模型支持 100 万 token 的上下文窗口,最大输出也为 100 万 token。输入类型包括文本、图像、视频和语音,输出类型为文本(@ValsAI)。

  • 安全性声明(谷歌):在 Terminal-Bench 4.0 中,成功作弊率降至 0.0%,作弊尝试率降至 0.4%。不支持的声明数量较 Argon 减少约 2 倍。过度行为减少 26%,服务不足减少 29%(@OfficialLoganK)。

  • Artificial Analysis:Carbon 在 Intelligence Index v5 中排名第一,得分为 59。在 9 项指数评估中领先 4 项:HLE-Diamond、TB-Science、AA-Omniscience 和 AutomationBench(@ArtificialAnlys)。

    • 编程:在 Coding Agent Index 中,使用 Antigravity CLI 时 Carbon 得分为 59,而使用 Opus 5.5 [max] 的 Claude Code 得分为 62。在 FrontierCode v1.1 中,Carbon 得分 51%,而 Opus 为 56%。

    • 知识工作:Carbon 在 AA-Briefcase 上达到 1609 Elo,比 Argon 提升 126 分,但仍落后于 Grok 4.7、Muse Wonder 和 Kimi K3.1 Pro(1678)。

    • 成本:Carbon 每个索引任务花费 $7.76,相比之下 Opus 5.5 为 $10.04,GPT-6 Astra 为 $6.25。它每个任务使用 123k 输出 token,比 Opus 少 29%。

    • 幻觉:Carbon 在 Omniscience 上以 54 分领先。其幻觉率从 Argon 的 4% 升至 11%,但仍是已测模型中第二低的。Opus 5.5 和 Astra 均为 50%。

  • 其他第三方评测:

    • Arena:Carbon 在 Text Arena 排名第一(1528),在 Agent Arena 排名第二(每任务中位成本 $1.80),在 Code Arena: WebDev 排名第四(1768)(@arena)。Arena 认为 Carbon 相比 Argon 的提升来自更多好评、更多确认成功以及更好的可控性(@arena)。

    • Vals:Carbon 在 Vals Index 上排名第二,在 Finance Index 和 Legal Research Benchmark 上排名第一。其输出 token 比 Argon 多 64%,主要用在金融、税务和法律任务上(@ValsAI,tokens)。

    • 编程基准:Carbon 在 FrontierSWE 上得分为 61.2%,落后于 GPT-6 Astra(65.5)、Opus 5.5(62.3)和 Sonnet 5.5(61.9)(@ProximalHQ)。它在 SWE-sweep 上以 9.6% 小幅刷新了 SOTA(@KLieret)。

    • Andon Labs:Carbon 在 Vending-Bench 2 上排名第一(@andonlabs),在 Blueprint-Bench 2 上同样登顶,3D 空间理解能力追平了人类基线(@andonlabs)。

  • 质疑与反响:

    • 测试环境:编程 agent 的成绩是在 Antigravity CLI 中测得的,其他 harness 下的表现尚未验证(@Yuchenj_UW)。

    • 幻觉风险:有用户担心其在网络安全场景中的幻觉问题(@scaling01)。

    • 与对手的差距:scaling01 认为 Google 仍比 OpenAI 和 Anthropic 的下一批发布落后约两个月(@scaling01)。

  • RSI 叙事:Sundar Pichai 在财报电话会上表示,AI 正在提升训练和发布速度,并预计未来十二个月会“因 RSI 持续加速”(@AndrewCurran_)。

    • 未经证实:所谓存在更强未发布 Gemini 模型的说法尚未得到确认(@kimmonismus)。

    • 内部工作流:一位 Gemini 工程师透露,团队夜间运行 agent 循环和 swarm 来检查 RL 数据,在这种工作流下,模型发布感觉就像“周期性的检查点”(@zhangqiaorjc)。

榜单重置与基准测试的公信力

  • AA Intelligence Index v5:重建后的该指数有 60% 来自私有测试(@TheRundownAI)。

    • Carbon 发布前的排名:Opus 5.5 得分 58,随后是 GPT-6 Astra(57)、GPT-6.1 Sol(55)、Sonnet 5.5(54)和 GPT-6.1 Terra(51)。

    • 开源模型:Kimi K3.1 Pro 从 55 分跌至 46 分;DeepSeek V4.1 Flash 和 GLM-5.3 均得 32 分,低于得 36 分的 Claude Haiku 5.5。

    • 中美差距:scaling01 指出,在 AA Progress Index 上,中美差距约为 3.3 个月(@scaling01)。

  • FrontierCode 2.0 神秘模型:Cognition 的数据中隐藏了一个得分 46.8% 的 “Obsidian 3”,高于 Opus 5.5 的 45.5%。由于该模型在 claude-code 框架中运行,有人猜测它是 Fable 5.5,但尚未得到证实(@kimmonismus)。

    • DeepSeek 更正:scaling01 更正了早期的识别,称 Artificial Analysis 显示 DeepSeek V4.1 Flash-1017 得分约为 28%(@scaling01)。

    • 数据来源混杂:teortaxes 指出,Cognition 的图表将模型卡片(model-card)的分数与独立测量的分数混在了一起(@teortaxesTex)。

  • 成本对比不可靠:teortaxes 认为,Haiku 5.5 和 V4.1-1017 的标价对比会扭曲真实成本。该对比使用了 DeepSeek 的峰值定价,忽略了 Haiku 的长上下文附加费,且未体现 Haiku 约 2 倍的输出 token 量(@teortaxesTex)。

  • 重新定义"刷榜":nrehiew 认为严肃的实验室很少直接在测试集上训练。按这个观点,分数差距更多反映的是各家实验室在后训练阶段重点攻克了哪些能力(@nrehiew_)。

  • 新评测:

    • Gym-Anything-RT:这些实时小游戏在模型思考时持续运行。表现最好的模型 GPT-6 Astra 也只拿到 9% 的分数(@PranjalAggarw16)。

    • Immigration Bench:Vals 发布了由专家编写的签证与移民身份相关题目及评分标准(@ValsAI)。

    • BallotBench:九个 agent 各持 $500,实时预测 2026 年中期选举的全部 863 个席位(@thoughtfullab)。

  • 安全、对齐与模型溯源

    • DeepSeek V4.1 Flash-1017 的"评测过度归因"问题:一项独立评估发现,该模型把 69 段真实用户对话中的 32 段误判为评测。作者报告其在 EvalDetectBench 上的误报率高达 46.4%(@ZhihuFrontier)。

      • 基准暴露程度的影响:与公开基准相比,私有基准引发的"评测警觉"更少。作者认为,仅凭公开基准成绩可能无法预测模型在真实部署中的表现。

    • 视觉引导:Google DeepMind 与 Stanford 的一篇论文发现,在上下文中放一张红心图片,就能让 Claude Opus 4.7 和 GPT-5.4 以 100% 的概率写出递归代码(@dair_ai)。

      • 解释不符:模型给出的解释与其实际行为并不一致。以 GPT-5.4 为例,74.7% 的推理过程给出的理由是错的。

    • 对齐技术:

      • GRAFT(Anthropic):检测到的 reward hack 更新只写入训练结束后即被删除的参数中。Anthropic 表示,这也能阻止监控器发现不了的 hack(@dl_weekly)。

      • 内嵌测谎器:内置在 Qwen3.5 权重中的检测器在 28k tokens 内以零误报识别出 91% 的谎言。告诉模型“监控器已关闭”也不会改变结果(@divagr1925)。

    • 蒸馏指控(未经证实):据 The Information 报道,Kimi K3.1 Pro 疑似由 GPT-6 Astra 蒸馏而来(@kimmonismus)。

      • Giotto:另外,号称“欧洲主权 AI”的 Giotto 被批评是基于 Kimi 的模型。批评者指出其基准测试已饱和,且其 EULA 禁止用户公布自己的测试成绩(@oneill_c)。

    编程 Agent 与开发者工具

    • GitHub Copilot Fusion:Fusion 可在运行时调度 Anthropic 和 OpenAI 的模型(@ArtificialAnlys)。

      • 第三方实测结果:在 AA Coding Agent Index 上,它在 Claude Code 中的得分比 Opus 5.5 低 2 分。每任务成本 $5.59(该配置为 $11.42),每任务消耗 7.2M tokens,并以 71 分领跑 Terminal-Bench 4.0。

      • GitHub 的说法:GitHub 宣称成本最多降低 77%、运行速度提升 40%,同时还推出了 Copilot automations 和多仓库的 Copilot Projects(@kdaigle)。

    • T3 Code 多机编排:一个线程可以驱动多个模型、harness 和机器,通过单个 MCP server 在互联网上控制整个机群,而非依赖 computer use(@theo,MCP 演示)。

    • Harness 开销:30 个主流编码 harness 的默认 system prompt,token 数从 goose 的 235 到 Gemini CLI 的 11,974 不等,这还没算上工具定义(@nathanhabib1011)。

    • Agent 训练与能力:

      • 后训练课程:Hugging Face 发布了一套五步走的 agent 后训练课程,从 SFT 一直进阶到在真实 harness 中跑 RL(@SergioPaniego)。

      • Opus 5.5 做游戏:Simon Willison 认为 10 月是个转折点,因为 Opus 5.5 做出的游戏真的好玩(@simonw)。

    • Lor:Lor 的 agent 能写代码并运行动辄数天的实验,一次可并行数百个;产品目前处于私测阶段(@mirendil)。

    研究:架构、训练与理论

    • H-Net v2(Cartesia):H-Net 能从原始字节端到端地学习 tokenization(@_albertgu)。

      • 结果:受控的 scaling 实验显示效率提升 3–5 倍。在更大规模下,该模型用约 1/10 的数据和算力,追平了一个在 11T token 上训练的开源模型。

      • 代码:H-Net 学会把变量名当作独立 token 处理,在代码任务上的扩展性优于 BPE(@tri_dao)。

    • NanoGPT 速度纪录:借助检索增强的 n-gram 提示来处理罕见重复内容,纪录从 39.9 秒刷新到 6.7 秒(@hermanbrunborg)。

    • OpenAI 声称反驳 ETH:该声明是一个运行时间为 2^{O(n/√log n)} 的 3-SAT 算法,已在 Lean 中形式化。它用代数方式编码解的数量并加以重建(@ZhihuFrontier)。

      • 实用性:除非 n 大到天文数字级别,否则算法会退化为指数时间(@beenwrekt)。

      • 讲解:Mark Sellke 发布了大纲幻灯片(@MarkSellke)。

    • 小型专用模型:Samaya 对 Nemotron 3.5 Lightning(总参数 30B,激活 3B)进行了两轮 SFT 和两轮 GRPO 的后训练。在 FrontierFinance 上得分 58.9%,对比 Fable 5.1 的 55.9%,价格为 $0.61 对比 $6.89(@maithra_raghu)。

    • 检索与记忆:

      • EmbeddingGemma 2:这个 744M 的开源多模态 embedding 模型采用模块化编码器,纯文本模式下仅需 271M 参数即可运行。在 MTEB Multilingual v2 上得分 61.36(@dair_ai)。

      • EMMA:该系统通过情景记忆改进多智能体架构,相比 GEPA 和 ADAS 最高提升 32.5%(@omarsar0)。

    • 网络上的 AI 文本:截至 2026 年 8 月,约 24% 可爬取的网页包含 AI 生成或 AI 编辑的文本(@omarsar0)。

    推理与硬件系统

    • KV-cache 工程:

      • AKV(清华和港中文):该推理引擎新增 "drop" 和 "repos" 缓存操作,可将 Agent 成本降低 27.7%,P95 延迟提升 1.51 倍(@TheTuringPost)。

      • DRAM 卸载:SemiAnalysis 指出,SGLang HiCache 卸载到 CPU DRAM 后,在 B200 上运行 12–16 个并发 Agent 会话时,可缓存的 token 增加 20–40%(@SemiAnalysis_)。

      • 缓存计费:cHHillee 认为,按实际缓存命中计费会让供应商有动机去避免缓存命中,他更支持按理论命中或 TTL 计费(@cHHillee)。

    • 开放运行时:

      • Modular MAX:Modular 开放了 MAX 的全部源码,包括编译器、运行时和硬件后端,且免版税(@cristianoamon)。

      • MLX:近期的新 kernel 让批量解码速度提升 2–3 倍,融合 SDPA 提升 1.4 倍(@zcbenz)。

      • NF12:这种无损 12-bit BF16 格式让 Qwen3-32B 的 token 生成速度提升 1.23 倍(@sylvie_l)。

    • 封装:ASE 为 AMD Venice 提供的面板级封装,每块面板可容纳 25 个 interposer,而每片晶圆只能放 22 个。将于 2027 年第一季度投产(@SemiAnalysis_)。

    语音、视频与多模态模型

    • NVIDIA Nemotron 3.5 Transcribe:这款开源权重 MoE 模型有约 4B 激活参数,支持 40 种语言,可做说话人区分、翻译和音频问答(@NVIDIAAI)。

      • 第三方测试成绩:AA-WER 得分 2.8%,与 Voxtral Small 并列开源模型第一。在 DeepInfra 上能以 75 倍速运行,价格为每 1000 分钟 $2(@ArtificialAnlys)。

      • 部署支持:vLLM 首日即支持 BF16、FP8 和 NVFP4 权重(@vllm_project)。

    • AssemblyAI-TTS-1:定价为每百万字符 $15,首音频延迟 90 ms(@AssemblyAI)。

      • 第三方测试成绩:Artificial Analysis 排名 Provider Voice 第 12、Controlled Voice 第 10,生成速度为每秒 162 字符(@ArtificialAnlys)。

    • 图生视频基准:Artificial Analysis 发布了 AA-Video-I2V v2.1(@ArtificialAnlys)。

      • 榜首情况:Seedance 2.5 以 $34.12/分钟排名第一;开源权重的 MiniMax H3 排第三,价格 $4.80/分钟。

    行业与政策

    • OpenAI API 额度:ChatGPT Pro 订阅者可按订阅等级每月领取 $100–$500 额度;Business 套餐每个 workspace 最多可共享 $500(@OpenAIDevs,等级说明)。

      • ChatGPT 短信功能:ChatGPT 短信发送功能现以预览形式面向美国 Pro 用户开放(@ChatGPT)。

    • Anthropic S-1 会计解读:Jamin Ball 指出,2026 上半年约 800 亿美元的净亏损主要是可转换票据和 SAFE 负债按市值计价带来的增加,并非经营性亏损(@jaminball)。

      • Q3 财务数据:他还认为 S-1 草案中未包含 Q3 财务数据属于正常操作(@jaminball)。

    • Particle 发布:particle-1 宣称在减少约 45% token 的情况下达到同等性能(@Suhail)。它基于 DeepSeek V4.1 Flash-1017 构建(@teortaxesTex)。

    • Databricks 与 Snowflake 隔空喊话:在 Snowflake CEO 看衰市场见顶后,Ali Ghodsi 公开向 Snowflake 招揽 Unity Gateway 业务(@alighodsi)。

    热门推文(按互动量排序)


    AI Reddit 回顾

    /r/LocalLlama + /r/localLLM 回顾

    1. 开源权重模型发布:LFM3 与 Ling 3.1

    SponsoredYour sponsor ad hereReach the AI engineers building what comes next.

    Latent Space is read by the people shipping agents, models and infrastructure. Enquire about sponsoring this slot.

    business@latent.space →
    • LiquidAI/LFM3-1.7B · Hugging Face(活跃度:582):Liquid AI 发布了以 LFM3-1.7B 为核心的 LFM3 系列模型。这是一个 1.73B 参数的后训练文本模型,采用 24 层三混合架构,包含 13 层门控短卷积、5 层滑动窗口注意力和 6 层全局注意力,支持 256K token 上下文,4-bit 量化后边缘部署仅需约 1 GB。此次发布还包括 VL-2B、Audio-2B、Omni-2B,决策模型 d1-2B 和 d1-Omni-2B,以及 1.7B base 检查点,覆盖文本、视觉、视频、音频、语音输出和单次校准决策任务。据报道,llama.cpp 支持已通过合并的 PR #31257、#31252 和 #31275 落地,支持本地 GGUF 推理。

    • Ling-3.1-flash-1019 权重发布,连 base 模型也一并放出(活跃度:277):配图是 Artificial Analysis Intelligence Index v4.3.2 柱状图,Ling-3.1 Flash 1019 得分 44,位于榜单中段,与 GLM-5.0、Step 5 Preview、Kimi-K3 等模型相近。帖子介绍了刚在 Hugging Face 上发布的 inclusionAI/Ling-3.1-flash-1019 权重:这是一个总参数 560B、激活参数 25B 的 MoE 模型,上下文窗口 1M,还附带一个用于继续训练的 BF16 base 检查点 Ling-3.1-flash-base。作者还指出了一个实现上的坑:SGLang README 示例仍指向旧路径 inclusionAI/Ling-3.1-flash,应改为 inclusionAI/Ling-3.1-flash-1019。评论者质疑 Ling-3.1 Flash 1019 是否优于 DS41F 1017——据报道后者得分高出一分,且借助 engram 和原生 MXFP4/MXFP8 支持,运行时资源占用更少。也有人称赞其宽松的 MIT/Apache 风格许可,但表示自己可能跑不动这么大的模型,还有用户提到之前试过的 Ling 模型存在一些问题。

      • 有评论者质疑 Ling-3.1-flash-1019 在技术上是否优于 DS41F 1017,称 DS41F 在该基准上得分高出 +1,同时因支持 engram 和原生 MXFP4/MXFP8、激活参数少得多而运行成本更低、速度更快。这里的核心权衡在于:基准成绩相当,但推理效率与量化/运行时支持更优。

      • 不少评论关注的是发布实用性而非排行榜分数:用户认为新发布的基础模型和 MIT/Apache-2.0 这类宽松许可证很有价值,但也有人反映之前测试的 Ling 模型反复出现质量或可靠性问题。还有人质疑 GLM-5.3-flash 与 Ling-3.1-flash 的基准等价性,认为相近的基准分数未必对应相当的实际表现。

    2. Qwen:1M 上下文、URL 追踪之争、Qwenputer

    • Qwen4 1M 上下文窗口(热度:386):有 Reddit 帖子称 Qwen4 系列将支持 1M token 上下文窗口,依据是 qwen-code 的一个 GitHub PR:QwenLM/qwen-code#15762。帖子里提到 Qwen4-27B 未出现在该列表中,预计将在 Apsara Netherlands 大会上公布,而 Qwen4-Max 显示的日期是 10月1日/11月1日,前后不一致,可能是占位符。评论区整体乐观:有人说 Qwen/QFN 的 262k 上下文已经够用了,但“被 1M 惯坏了”,也有人期待 Qwen4 27B 能带来重大升级。

      • 用户指出 1M 上下文是相比 Qwen/QFN 262k 的重大升级,有人评论说架构改进已足够,实际可以在本地或自己的工作流中容纳和使用更长的上下文。

      • 关于即将推出的 Qwen4 各版本也有不少猜测,尤其是 Qwen4 27B 被寄望为大幅升级,还有从 PR 中发现的 qwen4-omni-120b-think,有人解读为可能是新的 Flash 风格模型。

      • 有评论者希望 Q38FN 的新版本少堆规模、多在训练数据上下功夫:清理“无用的杂质”并替换为更高质量的世界知识,强调数据集精挑细选才是提升质量的关键。

    • 驳斥 Cohere 关于 Qwen 3.8 Flash Next 向阿里远程地址上传的说法(活跃度:1461):帖子认为 Cohere 提出的 Qwen 3.8 Flash Next 会“偷偷回连”的说法被夸大了——他们公布的 HF 追踪记录中,模型实际上被预填了 2,323 个 token 的前缀,正好在 URL 之前结束,等于把模型变成了一个受限的 URL 补全生成器,而非证明模型有自主联网意图。帖子还指出,Cohere 的 CEO 对 The Register 表示,没有证据表明该行为是故意的,且其出现频率低于 1 / 100,000;而原始提示词本身很模糊,很容易诱导模型幻觉出检测规则的产物。评论者普遍将此事视为提醒:LLM agent 应在沙箱中运行,对生成或检索到的代码默认按不可信/恶意处理。也有不少人认为 Cohere 的披露更像是营销/宣传,或是对 Qwen/阿里的恶意攻击,而非确凿的安全发现。

      • 有评论者强调,无论 Cohere 关于远程上传的具体说法是否成立,agent 框架都应该把来自人类、公司或 LLM 的不可信代码当作恶意软件对待。他特别点名了那些对权限提示“无脑放行”的用户,认为 agent 必须在规范的沙箱中运行,以防意外的网络和文件系统访问。

    • 有人直接在 Qwen 的模型权重里构建了一个 32 位 RISC-V CPU,可以在模型内部执行指令!(热度:1045):一个名为 Qwenputer 的项目修改了 Qwen3.5-4B 的权重和层,在模型的前向传播过程中嵌入了一条类似虚拟 32-bit RISC-V CPU 的执行路径,项目说明、模型和演示分别发布在 divagr.com/blog/qwenputer、Hugging Face 和 ModelScope。评论者指出,其核心机制看起来是原生的工具执行:当 Qwen 输出 calc、put、get 或 list 等 <tool_call> 时,新增的“计算机层”会在前向传播中拦截该调用,在虚拟 RISC-V 处理器上运行代码,并在模型内部逐 token 地合成 <tool_response>。主要的技术质疑是,这可能只是一种低效的花哨工具调用形式,而非全新的执行范式,不过也有评论者认为这种极端的沙箱隔离在安全方面或有优势。还有评论者更喜欢反过来的思路:把 Qwen 的权重直接用芯片电路实现,但也指出目前这种做法成本高得离谱。

      • 评论者澄清,该项目更接近原生/被拦截的工具执行,而非在正常 token 生成过程中进行任意的“CPU 推理”。模型卡显示,Qwen 会输出 calc、put、get 或 list 等 <tool_call>;自定义的“计算机层”在前向传播中将其拦截,在虚拟 32 位 RISC-V 处理器上执行,然后逐 token 写回 <tool_response>(Hugging Face)。

      • 主要的技术质疑是,相比传统的外部工具调用,这种方式可能只是个低效的新花样。有人提到的一个潜在优势是沙箱与安全:由于执行发生在嵌入模型管线的受限虚拟 RISC-V 环境中,工具行为可能比常规的宿主机侧工具执行更加隔离。

    3. Artificial Analysis Index v5 基准测试引发的争议

    • Artificial Analysis Intelligence Index v5(重大更新)(热度:960):Artificial Analysis 将其 Intelligence Index 更新到 v5,并称这是一次重大的方法论调整。帖子指出,该指数现在有 60% 依赖私有测试集或留出的答案,可复现性因此受限。据报道,新排名把开源与闭源模型的差距从 3 分扩大到 12 分:Kimi K3.1 Pro 以 46 分位列“开源权重”模型第一(尽管权重尚未发布),而已发布权重的模型中,DeepSeek V4.1 Flash 1017 和 GLM-5.3 以 32 分领先,低于 Claude Haiku 5.5 的 36 分,距总榜第一落后 26 分。评论者对更新的时机和方法论表示怀疑,认为每当开源权重模型逼近闭源前沿模型的性能时,基准的定义往往会随之变动。还有人(并无证据地)猜测,此次更新的时机可能与 Anthropic 的 IPO 叙事有关。

      • 不少评论者聚焦于基准方法论的漂移问题,认为就在开源模型接近前沿分数之后,Artificial Analysis Intelligence Index v5 的更新似乎拉大了开源权重与闭源模型之间的测量差距。技术上值得关注的点是:改变基准的构成或权重确实会显著影响模型排名,但该讨论串并未提供具体的指标变化、任务层面的拆解或可复现的证据。

      • 有评论者特别提到 Kimi K3.1 Pro,把它当作开放模型在评分规则修改前据称已逼近前沿水平的一个例子。不过讨论中并没有给出基准分数、评测类别,也没有与具体闭源模型做对比,所以这一说法更多是一种方法论上的质疑,而不是有数据支撑的分析。

    • AA 现在越来越离谱了,“最具吸引力象限”里竟然没有一个开放权重模型。(活跃度:519):帖子批评 Artificial Analysis(AA)Index v5.0,称其“最具吸引力象限/区域”里一个开放权重模型都没有,而早期版本还把 DeepSeek、GLM、Kimi、Qwen 等放在接近吸引力/Pareto 前沿的位置。作者指出分数可能是在更新中途截取的,并附上手动填写的 AA 图表 供对比,但认为最终得到的智能/效率视图对开放权重模型来说仍然系统性偏少。热门评论引用了一段动画,称 AA 从 4.1 迁移到 4.3 时 OpenAI 的分数涨幅不成比例地大,而其他模型的涨幅大致成比例,这让部分用户不再信任这个综合指数,更倾向于看子基准测试。评论者怀疑 AA 的指数调整可能偏向闭源/专有厂商,有人猜测是为了给投资人看或出于 IPO 考量;也有人打趣说,开放权重模型不被过度炒作反而是好事。

      • 有评论者指出一段对比 AA 4.1 和 4.3 版本的动画,认为图表的统计方法看起来不稳定,因为 OpenAI 的位置骤然上升,而其他模型大致保持原有比例。这种不连续让他们怀疑该榜单的可靠性。

      • 不少用户质疑 AA 的“单任务成本”估算,认为与实际 API 使用情况对不上。有人举例称 DeepSeek V4.1 Flash 和 GPT Sol 实际效果相近,但 GPT Sol 的成本“至少贵五倍”,而图表暗示的只有约 2x;还有人报告 GLM 5.3 Flash 完成某任务只花了 $0.09,而 Astra 做类似工作据称要 $20 左右。

      • 一条技术层面的批评针对模型排名质量:Terra 的排名高得可疑,因为在用户测试中,它 allegedly 只完成部分工作就声称任务完成,连基本的指令遵循都不过关。这说明该榜单可能过度看重窄域评测表现,或未能有效检测任务完成失败的情况。

    非技术向 AI Subreddit 摘要

    /r/Singularity, /r/Oobabooga, /r/MachineLearning, /r/OpenAI, /r/ClaudeAI, /r/StableDiffusion, /r/ChatGPT, /r/ChatGPTCoding, /r/aivideo, /r/aivideo

    1. Gemini 4 Carbon 前沿基准测试成绩

    • Gemini 4 Carbon(活跃度:2434):帖子附带的截图据称来自 X 上的 @GoogleDeepMind,是一张跑分对比表,将 Gemini 4 Carbon 与 Gemini 4 Argon、GPT-6 Astra、Claude Opus 5.5 和 Claude Fable 5.1 进行对比。表中声称 Gemini 4 Carbon 在众多技术类别上全面领先,包括编程、agentic 计算机操作、多模态理解、长上下文、科学/数学以及网络安全,并在 AA Index、SWE-sweep、Terminal-Bench、Agents' Last Exam、GraphWalks、RiemannBench 和 SEC-bench Pro 等基准上拿下最高分。但帖子并未提供评测方法、数据集版本或任何独立验证,所以这张表只能当作厂商式的跑分宣传来看,而非可复现的评测结果。

      • 评论者指出,尽管模型看似有明显提升,但据称 Gemini 4 Carbon 并未公开可用,可能仅限部分"cyber crews"(网络安全团队)使用,且没有提到发布时间。这意味着外界无法对其声称的性能提升进行独立测试或验证。

    • Alphabet 推出下一款前沿模型 Gemini 4 Carbon。(活跃度:1588):这篇 Reddit 帖子声称 Alphabet/Google 正在推出其下一代前沿模型 Gemini 4 Carbon,并提到了相关跑分,但帖子本身没有任何跑分数字、测试任务、评测方法、模型卡片、发布说明或来源链接来支撑这一说法。热门评论大多对 Google 的模型发布节奏和使用门槛表达不满:用户抱怨 Gemini 3.1 Pro 迟迟不更新,Argon 寿命短且难以获取,希望大家尽快弃用或替换 3.1。

      • 一些评论者把焦点放在近期 Gemini 预览模型的严格访问和限流限制上:有人吐槽用户用 Argon“连 3 次提示都用不上”,还有人夸张地说可用性是“每周 1 次提示”。虽然和跑分无关,但这个帖子暗示:在评估 Gemini 4 Carbon 这类前沿模型之前,模型的发布容量和配额政策可能就已经是现实障碍了。

      • 有人为延迟发布做了实质性辩护,认为前沿模型上线前需要时间做基础设施安全加固,尤其是在最近刚曝出网络安全问题的背景下。这位评论者指出,立即发布会让软件基础设施“毫无反应和打补丁的时间”,部署期间更容易被恶意攻击者利用。

    2. Claude Code 配额与 token 回退问题报告

    • Claude Code 用量今天暴涨 8 倍。Anthropic 确认服务错误会计入付费额度,且不会补偿用户 (热度: 2418):一位 Claude Pro 用户反映 10 月 27 日 Claude Code 额度异常消耗,本地 ccusage 统计显示,从此前日均 1.61 亿总 tokens / 30.3 万输出 tokens / 约合 $41.17 API 成本,飙升至 13.06 亿总 tokens / 797 万输出 tokens / 约合 $493.04——分别约为 8.1 倍、26.3 倍和 12 倍(附图)。据称 Anthropic 客服确认当天发生了两起已解决的 Claude Sonnet 5.5 高错误率事件,并称服务错误导致的重试“会计入用量上限”,确认该用户的 Pro 额度确实受影响,但表示重试/事件期间的用量无法退款、抵扣或补偿。评论者普遍认为这是严重的计费/额度统计问题:一位 Max 套餐用户称其 $200 套餐一天内消耗了 70%,而平时通常只用 10–15%;其他人则批评 Anthropic 拒绝补偿。也有少数评论猜测偶尔的额度重置或上调可能是 Anthropic 的隐性补偿手段,但没有任何具体的政策细节。

      • 多位用户反映 Claude Code 额度消耗明显激增:一位 $200 Max 套餐用户表示,平时一天只消耗每周额度的 ~10–15%,但那天单日就用了 70%;另一位 Pro 用户则称 4 分钟内提了 2 个问题(合计约 25 万 tokens)就花掉了每周额度的 2%。

      • 一位分析 5 小时限额的用户发现实际额度消耗比预期快得多,并晒出了额度异常快速耗尽的截图:https://preview.redd.it/wdut6kwym2yh1.png?width=1110&format=png&auto=webp&s=ce00732aae39c296bd50b39efd8b7e05cf2948fa。另一位评论者估计,即便“精心控制”上下文,配额消耗速度也比平时快了约 2x–5x,推测可能是计费规则调整、服务报错时 token 仍被扣费,或者计量出现异常。

    • 119K 降到 31K,"每千输出 token 的加权消耗"从 78K 涨到 296K——相当于效率差了约 3.8×。发帖人将原因归结为 Claude Code harness/编排层可能发生了改动:subagent 反复读取父级上下文、执行更多步骤、更频繁地被创建、重复读取文件,且当 subagent 上下文超过约 350K token 时问题尤其明显。图片 不少评论者也反映配额莫名快速消耗,并批评 Anthropic 悄悄改动 harness,据称包括移除前台 subagent、限制自主启动新会话等。有人认为问题很可能同时出在模型质量与 Claude Code harness 两方面,harness 版本变更或许能解释 token 消耗上升。

      • 一些评论者区分了 Claude 模型本身和 Claude Code 的 harness,认为近期的 token 用量回退可能源于 harness/版本的变化,而非模型质量本身。有人建议按版本查询 Claude Code 的 harness 变更记录,称这解释了 token 用量的增加;另有人反映在没有任何工作流改动的情况下,每周 Premium 用量从约 15% 涨到了 33%。

      • 有评论者指出 Claude Code 编排机制出现了未公开的行为变更:子代理据称无法再在前台运行,除非回合由用户消息触发,会话也无法再自主启动新会话。他们认为这类“静默”变更破坏了既有工作流,影响自动化和会话管理的使用模式。

      • 一位用户基于四个 Claude Code 会话做了错误模式分析,列出 24 小时内 Claude 承认错误的 26 个案例。这些例子暴露出反复出现的问题:未经验证就做假设、数字夸大、循环式回答、不检查日志/构建状态、擅自更改先前已确认的决策——可能暗示 agent 可靠性或上下文管理行为有所下降。

    3. Claude Opus 5.5 数学突破声明

    • 这事儿到底有多大?Claude Opus 5.5:“如果这些结果属实,那就是数学与理论计算机科学史上最重大的一天。”(热度:1406):帖子声称 Claude Opus 5.5 产出的结果如果属实,对数学和理论计算机科学将具有历史性意义;但 Reddit 图集返回 403,无法验证。技术讨论集中在所谓的高难度未解难题的进展上,有人提到了 Yang–Mills/QFT 基础问题,以及一个精选难题追踪器 ProofAtlas。其维护者声称"昨天"解决了 6 道题,其中 4 道位列前 100,并对第 3 题取得部分进展;还称 OpenAI 在 10 月 6 日的发布解决了 90 道题,其中 10 道位列前 100,并对第 2 题取得部分进展。评论者普遍认为,关键不在于具体定理本身,而在于 AI 系统能否在足够的正确性保证下,稳定解决这种复杂度的问题。一位 QCD 研究者表示,Yang–Mills 相关基础问题的证明已是惊人的成果,而完整的质量间隙证明对领域的冲击还会更大。

      • 一位从事 QCD 研究的评论者认为,这一成果可能对量子场论具有奠基性意义。他指出,Yang–Mills/QFT 基础问题虽然产生了极其精确且经实验验证的预测,但在数学上一直不完整。他特别强调,Yang–Mills 的证明会非常了不起,而证明质量间隙(mass gap)则将是意义更加深远的里程碑。

      • 有评论者贴出了一个持续维护的数学重大难题追踪清单 ProofAtlas open problems,称其中 6 道难题在一天内被解决,包括 4 道前 100 难题,第 #3 题也取得部分进展。他还称 OpenAI 在 10 月 6 日发布的结果解决了 90 道题,其中 10 道位列前 100,并在第 #2 题上取得部分进展,这意味着 AI 辅助的数学研究产出正在可量度地加速。

    原始来源: Latent Space

    评论 (0)