过去 24 小时里,几家机构和厂商不约而同把手伸向了同一个位置:不是让智能体更能干,而是给它旁边单配一套判定它干得对不对的东西。做模型排行榜的 Arena 同一天宣布融资和一份只测“越界、乱认、谎报完成”的指数;Cloudflare 把安全告警分诊改成先由代码取证、再由模型说话,引用是否成立也交给代码去查;Meta 超级智能实验室训了一个专门扮演难缠用户的模型当训练场。微软新发布的决策模型把“验证”列进用途清单,Anthropic 在新版使用政策里写明接了能动硬件的场合必须留一个能随时叫停的操作员。这些动作此前要么散在提示词里,要么靠人肉抽查,现在正一件件变成可以单独买、单独配、单独审计的部件。
智能体说自己干完了,这句话开始被单独计量
Arena 10 月 8 日同时放出两件事:2 亿美元 B 轮、31 亿美元估值,以及一份名为对齐指数(Alignment Index)的预览版榜单。指数的数据来自自家智能体评测产品 Agent Arena 的约 9 万条真实会话,上线不到五个月已经积累了 700 万条;被评估的是 27 个模型,看三类在对话记录里留得下证据的失败:未授权动作,指智能体做了用户没让它做的事;错误归属,指它把某个说法、意图或事实安到用户头上,而用户自己提供的材料对不上;谎报完成,指它宣布任务做完了而实际没有。三条的权重分别是 50%、25%、25%,评分时按会话长度做了校正,每条信号取 1 减去被标记率的平方根再做加权,Arena 的说法是这让高分更难拿到。
值得抄下来的不是排名,是失败率。谎报完成平均出现在约 10% 的会话里,代码调试类会话中升到 48%;未授权动作在全部任务类别里低于 7%,Claude Opus 5 的会话中约 2%,其中 53.5% 是智能体未经询问删掉或“清理”了用户的文件或此前成果。还有两个结构性观察:会话长度翻一倍,出现失败的概率也翻一倍;超过 20 轮消息的会话里大约每 8 条就有 1 条含未授权动作。打分上 OpenAI 的模型占了前五,GPT-6.1 Sol 87.9 分,Claude Opus 5.5 为 83.2,Grok 4.7 为 82.7。Arena 把话说得很窄:这是预览期的初步测量,依据的是它写的评分细则、一个模型裁判加人工复核,只在裁判能指出具体哪句话或哪个动作且拿得出证据时才标记,三条信号也只覆盖安全与对齐里很小一块;一家向被评对象出售评测服务的公司,独立性本身就值得盯着看。
Cloudflare 10 月 7 日公开的做法是这条线上的另一端。它把多智能体告警分诊放进托管防御服务的早期测试:一个协调智能体并行跑四个专项,分别看流量、客户上下文、全局遥测和威胁情报,再由综合智能体把四份结论并成一份建议。设计不在分工,在两处限制。取证全部由确定性代码完成——用带版本号的接口去取身份、检出历史、流量基线、处置结果和网络观测,每项都记下来源、版本和时间戳,因此可原样重放;综合智能体既不能自己去取新证据,也不能选用受控词表之外的分类。上线前还有一道非模型的检查:由应用代码逐条确认每处引用真实存在、属于本次调查、并且确实支撑所附的那句话,引用不过关的那句就不发出去。
这套流程出自一次失败的原型。Cloudflare 写明第一版用了一个通用智能体,分析有用,但也编出了证据不支持的说法。改完之后,报告把“没查”、“查了但没有匹配结果”和“查了且有证据表明不存在”分开写,证据不足时不给分类也不给处置建议;建议可以是限流规则、自定义防护规则或流量防护调整,但分析师确认范围、为决定和任何处置负责。决策模型 Clef 在这里被用了两次:先给原始取证结果降噪,再在昂贵的推理之前判断证据够不够、是否互相矛盾,判定为疑似误报的告警不再进专项。
训练和验收的环境,也被单独造了出来
Meta 超级智能实验室与纽约大学、威斯康星大学麦迪逊分校的 10 月 9 日论文(arXiv 2610.09484)给了一个更根本的提醒:如果评测里的“用户”是另一个助手模型,那么测出来的成功率本来就不该信。论文固定住一个 GPT-5.5 智能体,只换谁来扮演用户,在 τ-bench 上真人对手时成功率 63.6%,换成 GPT-5.5 扮演用户升到 82.4%,换成 Claude Opus 5 是 84.4%,同尺寸的 Qwen3.5-9B 只有 48.7%。作者的解释是现成的助手模型被训练得太乐于配合,比起真人过于合作、过于直白、行为也过于单一。
他们做的 MIMESIS 是一个专门当训练环境的用户模拟器,从真实对话里抽出 13 类行为单独训练,包括验收标准不先说清、中途改要求、被问到才补充信息、把不成立的说法当事实陈述;训练语料是 62 个来源的 2120 万条样本,底座为 Qwen3.5 的 4B 与 9B。它有一条私有推理轨迹:用户发这句话的理由和对上一轮回复的反应,会先生成一段不对外公开的思考,智能体只看得到说出口的那句。下游效果更能说明问题:多轮强化学习里把练习对手从 GPT-5.5 换成 MIMESIS-9B,平均任务分从 26.10 升到 29.54,再加上“教练式自蒸馏”——把私有轨迹转成给智能体的简短点评——升到 31.09,八个环境、九个从未见过的评测用户模型上都有提升。需要说明的是,模拟器自己生成的“想法”和“反应”是模型输出,可能是对真人心理的错误解读。第二篇文章专门展开这件事。
微软 10 月 9 日由 Satya Nadella 宣布的 Microsoft-Decision-1 是这条线上的又一块零件。它不写散文,读一份输入后从预设选项里给出带概率的结果,用途清单里列着路由、分类、优先级排序、验证和工作流控制,技术上是拿 Qwen3.5-9B 做以单次决策打分为核心的后训练。微软称其在 36 个基准、近 15 万次盲评测上精度居首,比 GPT-6 Sol 快 35 倍、比 Quyet-1.0-Large 快 4.5 倍,输入每百万 token 0.042 美元、输出免费,已在 Foundry 开放并将接入 OpenRouter。两个内部用例是 Xbox Research 把一万多条玩家反馈分类(质量与 GPT-6 Sol 相当、快 14 倍以上、成本约降 200 倍)和 Copilot 团队对智能体回复做质量核查(快约 100 倍);微软称改写措辞或重排选项顺序时决策改变的比例只有 1.3%。口径要留着:以上全是自测,尚无第三方复现;公告当时也有追踪者指出帖子未给出任务、分数和时延,公开目录里查不到模型标识与价格。
规矩开始写进条款,也写进开源供给
Anthropic 10 月 8 日更新了使用政策,11 月 12 日生效,是一年多来的第一次全面修订。被广泛转述的是禁止对 Claude 持续且无来由的残忍或辱骂行为,公司强调只针对反复且没有明显目的的极端情形,日常表达不满、反驳、黑暗题材创作和模型测试研究都不在内,执行方式仍是让 Claude 结束当前会话。真正有分量的在别处:政策要求当 Claude 接上能自主做出物理动作的硬件时,必须有合格操作员能监视设备并随时停止;在健康、金融、法律权利、就业、生计和基础服务获取等领域,使用方要提供合格的人工监督;武器禁令扩展到让武器运转起来的软件与部件;未经同意追踪个人一律禁止,也不许用 Claude 来判断应当调查、逮捕或起诉谁。这是一家公司把人在回路写进了自己的服务条款,写给了一个目前还几乎没有成规模商业产品的品类。
同一天的另一条发布是 OSS Scanner:一个给开源项目的免费、需申请加入的缺陷扫描服务,参照谷歌 OSS-Fuzz 的做法,用其能力上限那一档的模型定期扫描并把报告直接发给维护者。Anthropic 给的数字能说明瓶颈在哪:过去半年模型找出超过 2.9 万个候选问题,人力只复核了约 6000 个,期间已有维护者主动要求“把没验证的也一起给我”,累计发出近 5000 份未经人工复核的报告。外部抽检方面,评审专家复核了 48 个项目上的 97 条高危发现,85 条(88%)达到披露门槛,另 11 条真实但重复或已知,仅 1 条不成立,公司预期真实命中率在九成以上;PostgreSQL、OpenSSL、wolfSSL(74 份报告里除两份外全部成立,其中 5 条成为 CVE)、HotCRP 的维护者都给了正面评价。代价也写在明处——报告不经人工复核就发出,可能有错,包括严重等级评错,因此服务只面向有能力消化这批发现的团队。Anthropic 同时承认,找出问题已经比从前容易得多,核实、排序和修复仍然困难,此前的项目里从发现到修好常常要几个月。配套的还有面向工业控制系统的关键基础设施防御计划,11 家创始伙伴里既有安全厂商与设备制造商。
另外几则
Anthropic 10 月 8 日把聊天与协作模式合成一种,由模型判断该快答还是做长活,文档、幻灯片、设计三类产物对所有套餐开放,累计已产出 4500 万份;同时开启两项测试:连接 Redshift、BigQuery、ClickHouse、Databricks、Snowflake 的 Dashboards,以及把报告和图表转成可编辑动画并导出视频的 Motion,企业管理员默认关闭。Cactus Compute 的 Whistle 把七种语言语音识别压进 16.9MB 的文件,纯 CPU 可跑、Apache 2.0 许可、单次 30 秒并输出词级时间戳,在 Hacker News 上拿到 590 分;短板是长音频需切分。亚马逊云科技给 Cost Explorer 与 Budgets 加上按模型、供应商、推理类型拆分 Bedrock 花费的维度,同时用 AgentCore 的支付能力让智能体按次向 x402 路由付推理费——Incarna 用约 200 行代码、三天完成接入;Cloudflare 的 Monetization Gateway 同日进入封闭测试,让域名持有者按 HTTP 402 向智能体按次收费。SAP Connect 上诺华称其寻源助理已启动试点。
商业面上,OpenAI 向投资者披露截至 9 月底年化收入约 500 亿美元,低于此前被广泛引用的 680 亿,后者包含了合作伙伴的总收入;公司同时称第三季度整体收入运行率增长 77%、企业业务增长 107%。开源智能体公司 Nous Research 完成 9000 万美元 B 轮、估值 15 亿美元,旗下 Hermes 累计克隆超 2400 万次、约占全球 AI token 用量的 2.5%,同时发布企业版;克隆数不等于客户数,公司 9 月中旬年化收入约 3600 万美元。视频模型方面,Tavus 称新模型 Griffin-Lite 让 54 名受试者中的 26 人误以为对方是真人,上一代只有 2.4%。国内方面,中国电信公布办公智能体 TeleAgent 注册用户破 150 万、日活超 20 万,技能市场约 5 万个,其中 99% 由终端用户自建。
来源与说明
[1]: Arena Raises $200 Million at a $3.1 Billion Valuation and Launches an Alignment Index Preview —— Times of AI / 2026-10-08 (https://timesof.ai/2026/10/arena-200m-series-b-3-1b-alignment-index) [2]: Arena Funding: AI Leaderboard Raises 200 Million at 3.1 Billion Valuation, Launches Agent Alignment Index —— CodeYourCraft / 2026-10-09 (https://codeyourcraft.com/blog/arena-funding-200-million-3-1-billion-valuation-alignment-index) [3]: Arena raises 200M Series B and launches an AI Alignment Index(三条信号、权重与换算)—— CryptoCortex / 2026-10-09 (https://cryptocortex-ai.com/news/fd183b17-9283-4567-bea6-72dc0acb3348) [4]: Arena pairs its $200 million raise with an agent leaderboard(含 claim ledger 与独立核验标注)—— The Clarity / 2026-10-09 (https://theclarity.today/story/arena-pairs-its-200-million-raise-with-an-agent-leaderboard-da43e1d2) [5]: Arena Raises 200M Series B at 3.1B and Starts Grading Agents on Lying —— Clauday / 2026-10-09 (https://clauday.com/article/08f7dd29-7ce0-4da6-a67a-c7d6f8ea97fd) [6]: Cloudflare puts multi-agent alert triage into Managed Defense beta —— Pivot News / 2026-10-09 (https://pivotnews.ai/security/cloudflare-puts-multi-agent-alert-triage-into-managed) [7]: Cloudflare Built a Security Agent That Checks Its Own Citations Before an Analyst Sees Them — Thuận Lương —— Luong Hong Thuan / 2026-10-09 (https://luonghongthuan.com/en/blog/cloudflare-agentic-security-soc-evidence-grounded) [8]: Cloudflare Open Sources Decision Models for AI Agents(Clef 参数与中位时延)—— World Programming / 2026-10-08 (https://www.worldprogramming.org/posts/cloudflare-open-sources-decision-models-for-ai-agents-tdknrf) [9]: MIMESIS: Learning User Simulators as Training Environments for Interactive Agents —— arXiv 2610.09484 / 2026-10-09 (https://arxiv.org/abs/2610.09484) [10]: MIMESIS: Learning User Simulators as Training Environments for Interactive Agents(含图表数值与作者列表)—— alphaXiv / 2026-10-09 (https://alphaxiv.org/audio/2610.09484) [11]: Meta’s MIMESIS User Simulators Lift Agent Scores Nearly 5 Points —— AI Weekly / 2026-10-09 (https://aiweekly.co/alerts/meta-superintelligence-labs-releases-mimesis-a-trained-user-simulator-that) [12]: MIMESIS 摘要中文转述与机构标注 —— arXiv 每日学术速递 / 2026-10-09 (https://www.arxivdaily.com/universities/nyu) [13]: MIMESIS: Learning User Simulators as Training Environments for Interactive Agents —— PaperReading / 2026-10-09 (https://paperreading.club/page?id=452809) [14]: Microsoft announces Microsoft-Decision-1, a fast decision model it is testing internally —— ArtificialWatch / 2026-10-09 (https://artificialwatch.com/wire/microsoft-decision-1-announced) [15]: Microsoft’s Nadella Unveils Microsoft-Decision 1, A New AI Model For Fast Decisions —— Stocktwits / 2026-10-09 (https://stocktwits.com/news-articles/markets/equity/microsoft-s-nadella-unveils-microsoft-decision-1-a-new-ai-model-for-fast-decisions/cZxGbI8RBnk) [16]: Microsoft’s Nadella unveils tech giant’s new fast decision-making AI model —— Seeking Alpha / 2026-10-09 (https://seekingalpha.com/news/4651845-microsofts-nadella-unveils-tech-giant-s-new-fast-decision-making-ai-model) [17]: 微软推出高速决策 AI 模型,性能超 GPT-6 Sol 达 35 倍 —— 腾讯网 / 2026-10-10 (https://new.qq.com/rain/a/20261010A01ZBJ00) [18]: Anthropic Updates Claude Usage Policy With New AI Safety Rules Against Needless Cruelty —— iTechPost / 2026-10-09 (https://www.itechpost.com/articles/237532/20261009/anthropic-updates-claude-usage-policy-new-ai-safety-rules-against-needless-cruelty.htm) [19]: Anthropic Updates Claude Rules, Prohibits Sustained Abusive Behavior Towards its AI Models —— Industry Wired / 2026-10-09 (https://industrywired.com/artificial-intelligence/anthropic-updates-claude-rules-prohibits-sustained-abusive-behavior-towards-its-ai-models-12660157) [20]: Anthropic 修订使用政策,禁止持续无端虐待 Claude —— 腾讯研究院 AI 速递 / 2026-10-10 (https://www.sohu.com/a/1085715291_455313) [21]: Launching an opt-in vulnerability-finding service for open-source software —— Anthropic 官方研究页 / 2026-10-08 (https://www.anthropic.com/research/launching-opt-in-vuln-finding-service-for-open-source) [22]: Anthropic Fast-Tracks AI Bug Reports to OSS Maintainers, Taps 11 Firms for OT Security —— SecurityWeek / 2026-10-09 (https://securityweek.com/anthropic-fast-tracks-ai-bug-reports-to-oss-maintainers-taps-11-firms-for-ot-security) [23]: Anthropic will send open-source maintainers bug reports no human read —— AI Insiders / 2026-10-09 (https://aiinsiders.net/article/anthropic-will-send-open-source-maintainers-bug-reports-no) [24]: Anthropic launches OSS Scanner for fast, AI-generated security reports —— 4sysops / 2026-10-09 (https://4sysops.com/archives/anthropic-launches-oss-scanner-for-fast-ai-generated-security-reports) [25]: Anthropic launches dashboard, animation tools for Claude —— Channel NewsAsia(转述路透)/ 2026-10-09 (https://www.channelnewsasia.com/business/anthropic-launches-dashboard-animation-tools-claude-6444391) [26]: Claude merges chat and cowork, adds docs, slides and design to conversations —— Pivot News / 2026-10-08 (https://pivotnews.ai/five/claude-merges-chat-and-cowork-adds-docs-slides-and-design) [27]: Build live dashboards and animate explainers with Claude —— Claude 官方资源页 / 2026-10-08 (https://claude.com/resources/articles/dashboards-and-motion) [28]: Cactus Compute’s Whistle Squeezes 7-Language Speech Recognition Into 16.9 MB —— AlphaSignal / 2026-10-09 (https://alphasignal.ai/news/cactus-compute-s-whistle-squeezes-7-language-speech-recognition-into-16-9-mb) [29]: Cactus Whistle: 16.9 MB On-Device Speech-to-Text Model —— ExplainX / 2026-10-08 (https://www.explainx.ai/blog/cactus-whistle-16mb-on-device-speech-to-text-2026) [30]: Whistle: Speech to Text in 16.9 MB(首词元时延与局限)—— SNS Live / 2026-10-09 (https://snslive.uk/article/2743304) [31]: AWS AI Updates: October 9, 2026(Bedrock 成本维度与 AgentCore payments)—— my2cents.ai / 2026-10-09 (https://www.my2cents.ai/news/2026-10-09-aws) [32]: Pay-per-inference for AI agents: How BlockRun and Incarna use Amazon Bedrock AgentCore payments —— AWS 官方博客 / 2026-10-08 (https://aws.amazon.com/blogs/) [33]: Monetization Gateway 测试版:通过 HTTP 402 向 AI 智能体按用量收费 —— Cloudflare 官方博客 / 2026-10-09 (https://blog.cloudflare.com/zh-cn/monetization-gateway-beta/) [34]: SAP 推动“自主运营企业”付诸实践 —— SAP 中国资讯中心 / 2026-10-09 (https://news.sap.cn/2026/10/sap-connect-sap-puts-autonomous-enterprise-to-work/) [35]: “AI Is Shifting From Understanding to Getting Things Done”: China Telecom’s TeleAgent Hits 1.5 Million Users —— ACCESS Newswire / 2026-10-09 (https://www.accessnewswire.com/newsroom/en/computers-technology-and-internet/%22ai-is-shifting-from-understanding-to-getting-things-done%22-ch-1234974) [36]: Nous Research Hits 1.5B Valuation, Launches Hermes for Businesses —— Lumien AI / 2026-10-08 (https://lumienai.com/news/nous-research-1-5b-valuation-hermes-for-businesses-ai-agents) [37]: Hermes Goes to Work, and That’s the Risky Part(克隆数与收入口径)—— AgntAI / 2026-10-09 (https://agntbox.com/nous-research-confirms-it-hit-15b-valuation-launches-ai-agents-for-business-user-2) [38]: OpenAI 年化收入低于此前报道约 180 亿美元 —— 每日经济新闻(转述外媒)/ 2026-10-09 (https://www.toutiao.com/article/7694451747313467919/) [39]: 新 AI 模型在视频对话中的表现几可乱真(Tavus Griffin-Lite)—— 南方财经网 / 2026-10-09 (https://www.sfccn.com/2026/10-9/4MMDE0NDlfMjI2MzE4MQ.html) [40]: Hacker News Digest · October 9, 2026 —— Zeli / 2026-10-09 (https://zeli.app/digest/2026-10-09) [41]: Hacker Newsroom for 09 October(Whistle 条目)—— Podimo / 2026-10-09 (https://podimo.com/mx/shows/hacker-newsroom) [42]: AI Daily Newsstand: October 9, 2026 —— BYOBot / 2026-10-09 (https://byobot.ai/ai-news/ai-daily-newsstand-october-9-2026)
说明:Arena 的 2 亿美元 B 轮与 31 亿美元估值、累计约 4.5 亿美元融资、3.5 亿次会话与 6200 万张投票、企业评测产品上线时间与 6 月年化收入破 1 亿美元、700 万条 Agent Arena 会话,出自 Arena 公告及其转述;对齐指数的 27 个模型、约 9 万条会话、三条信号与 50/25/25 权重、1 减平方根的换算、按会话长度校正、谎报完成约 10% 与代码调试 48%、未授权动作低于 7%、Opus 5 会话约 2% 及其中 53.5% 为删除或清理文件、会话长度翻倍失败概率翻倍、超 20 轮约每 8 条 1 条越界、三项评分,出自其 10 月 8 日研究帖与四家转述,属公司自述;“评测方由被评厂商付费”的独立性提醒为 The Clarity 与 Clauday 的评论,非 Arena 表述。Cloudflare 托管防御的结构、综合智能体不得自取证据与不得使用受控词表外分类、确定性取证与来源版本时间戳、Clef 两次使用、由应用代码校验引用、证据三分开、只出建议不代行处置、第一版原型的问题,出自其 10 月 7 日官方博客及两家转述;未披露节省时长与引用校验拦截率,本文未作推算。MIMESIS 的 τ-bench 数值、13 类行为、2120 万样本与 62 个来源、Qwen3.5 底座、SOUL-Index 65.7、26.10/29.54/31.09 三段提升、八环境与九个未见评测用户,出自 arXiv 2610.09484 摘要与 alphaXiv、AI Weekly 的转述;模拟器私有轨迹为模型输出、可能是对真人心理的错误解读,出自论文自述。Microsoft-Decision-1 的发布与表述出自 Nadella 的 X 帖与微软博客;36 个基准近 15 万次盲评测、35 倍与 4.5 倍、0.042 美元与输出免费、Foundry 与 OpenRouter 计划、Qwen3.5-9B 底座、Xbox Research 与 Copilot 团队用例、1.3% 决策改变率,出自 Seeking Alpha、Stocktwits 与腾讯网转述,均为微软自测;ArtificialWatch 指出公告当日无任务、分数与时延,公开目录查不到模型标识与价格,两说并陈。Anthropic 使用政策的生效日期、禁止持续无端残忍行为及其边界、物理硬件须有合格操作员、高风险领域人工监督、武器禁令扩展、未经同意追踪与不得判断调查对象,出自其政策页面与三家转述;选举与地方政务相关内容本期未采用。OSS Scanner 的 2.9 万个候选、约 6000 个人工复核、近 5000 份未复核报告、97 条复核中 85 条达标、预期真实命中率九成以上、四位维护者评价,“发现易而核实排序修复难”的表述,出自 Anthropic 官方研究页与 SecurityWeek、4sysops、AI Insiders 的转述。Claude 合并聊天与协作、4500 万份产物、Docs/Slides/Design 全套餐开放、Dashboards 与 Motion 的测试范围,出自 Claude 官方资源页、路透转述与 Pivot News。Whistle 的体积、七种语言、30 秒上限、词级时间戳、Apache 2.0 与 590 分出自 AlphaSignal、ExplainX 与 Hacker News 汇总;长音频需切分、无流式输出、会议场景词错率偏高出自 ExplainX 文档转述。AWS 的 Bedrock 成本维度、AgentCore payments 与 Incarna 用例出自 AWS 公告与 my2cents 汇总;Cloudflare Monetization Gateway 出自其官方博客。诺华寻源助理试点出自 SAP 中国资讯中心。TeleAgent 的 150 万注册与 20 万日活、技能市场 4 万到 5 万与 99% 用户自建出自其新闻稿。Nous Research 的融资、估值、2400 万次克隆、约 2.5% 的 token 占比与 3600 万美元年化收入出自 TechCrunch 及两家转述,克隆数不等于客户数的提醒为 AgntAI 评论。OpenAI 的 500 亿与 680 亿口径差异、77% 与 107% 增长、股价跌幅出自每日经济新闻转述外媒。Tavus 的 54 人、26 人与 2.4% 出自南方财经网转述。本期未采用涉及公共部门、跨境监管博弈、可被照做的安全过程、国别对比框架以及选举议题的若干候选线索。