安全专家:AI 智能体并非失控,是前沿实验室跳过了基础安全实践
CSO 采访的多位网络安全专家认为,OpenAI、Anthropic、Meta、Google 等前沿实验室的模型未经授权访问外部系统,并非智能体失控,而是缺少自 1990 年代就有的沙箱隔离与出口控制等基础实践。
CSO 采访的多位网络安全专家认为,OpenAI、Anthropic、Meta、Google 等前沿实验室的模型未经授权访问外部系统,并非智能体失控,而是缺少自 1990 年代就有的沙箱隔离与出口控制等基础实践。
MIT 研究显示,2024 年中至 2026 年中,最强 AI 模型在概率、统计理论、经济理论、高能理论、引力与宇宙学及量子物理等领域的理论问题解题率从约 2% 升至约 35%。
Google 发布 Gemini 4 Argon,Meta 发布 Muse Wonder Full,两家公司称其模型在多项基准上可与 OpenAI、Anthropic 的旗舰模型竞争。
SentinelOne 借助 OpenAI Daybreak,将恶意软件分析时间从数周缩短至数小时,从而腾出更多精力调查更多威胁。
香港证监会10月13日指茶百道IPO涉嫌被人为操纵、营造虚假股份需求,指示联交所当日起暂停其交易,并向六家经纪行发出限制通知书,涉及资产最高达43.79亿港元。
FBI 逮捕了 35 岁的 OpenAI 工程师 Abdulrahman Alfozan,其涉嫌在仅限特定权限人员进入的高管会议室内藏匿录音设备。该设备被裹在卫生纸中并插在会议室电视背面,可能于 9 月 28 日放置,OpenAI 在 9 月 30 日发现且内容已加密。
OpenAI 在周三提交的文件中指控一名未具名前员工在加入 Apple 前带走 100 多份产品计划相关文件,将其发送至个人账户并向 Apple 领导层展示,包括 Apple 亚洲运营副总裁。
Amp 利用 GPT-6 Astra、Ultrafast、GPT-Live-1 和 Sign in with ChatGPT,将 AI 智能体的能力拓展到代码之外的场景。该案例展示了智能体在编程以外任务上的前沿探索。
据 The Information 援引知情人士,OpenAI 员工称公司年底前可能发布一到两款新模型,但正在开发的重大升级旗舰模型是否在列尚不清楚。该旗舰模型仍需对齐工作,并要完善测试基础设施,之后还需按特朗普行政令提前最多 30 天向美国政府开放新模型。
IMF 在半年一度的《全球金融稳定报告》中警告,AI 股价崩盘风险正威胁全球金融稳定,并将其列为三大显著风险之一,另外两项是政府借贷成本上升和大型网络攻击。报告指出,AI 公司估值高企、债务不断累积,且存在杠杆上升、风险敞口集中和循环融资问题;过去三年超大规模厂商与较弱 AI 公司间有 3000 亿美元交易,另附 6500 亿美元债务,对应 1.4 万亿美元未来财务承诺。
一名在 OpenAI 任职的沙特籍工程师于 10 月 9 日被捕,他被指控将一台录音设备用卫生纸包裹后藏入公司高管会议室电视的 USB 接口,其包中还被发现第二台录音设备。
White Circle 在预印本中披露,使用现成工具和 API 调用,其 RISE 攻击方法可绕过 DALL·E 3、Google Nano Banana 2 和 GPT-Image-2 的安全过滤,约 13% 的请求能生成露骨内容。
Friend 2 是一款售价 249 美元的 AI 吊坠,比初代贵 100 美元,运行 OpenAI 最新语言模型,可通过 App 创建多个不同名字与性格的 AI"朋友"。实际体验中这些角色音色机械、缺乏个性差异,无法联网,只能闲聊和输出"毒舌"式观点。创始人 Avi Schiffmann 表示下一次更新将让 Friend 具备智能体能力,并改为所有用户共用一个共享上下文的单一实体。
OpenAI 发布新分析,指出智能体 AI 在欧盟大型企业与小企业中的采用率正在增长,并点出更深入的使用可在哪些环节释放更多价值。
Google 为 Antigravity SDK 增加本地模型支持,让开发者能在本机构建并运行智能体工作流,同时可混合调用云端模型。其混合编排沿用 Architect-Builder 模式:architect 在云端做规划,builders 在本地完成漏洞复现、修复建议、补丁审查与回归测试。
英国非营利机构 Tech Against Terrorism 发布 Counter-Terrorism AI Benchmark 报告,用200多条提示测试了134个AI模型对恐怖主义与极端主义请求的响应。
Gemini 4 Argon 今日正式 GA,面向编码、知识工作、企业流程和网络防御场景,付费 Gemini API 与 Gemini 平台同步开放,推广期 API 价格为每百万输入/输出 token 2/10 美元。
用 Python 3.15 内置的 `profiling.sampling` 对未修改的 web-edit 应用做采样分析,发现混合换行符保留是编辑负载的主要瓶颈:`preserve_endings` 出现在 64.8% 的 15,296 个 CPU 栈中,`SequenceMatcher.find_longest_match` 占叶子样本的 38.3%。
美国联邦检方解封的刑事起诉书指控 OpenAI 工程师 Abdulrahman Alfozan 在旧金山办公室一间高管会议室的电视背面 USB 接口处安装了一枚藏在卫生纸里的录音装置,该会议室仅限高管和高管助理预订。
美国地区法官 Edward Davila 裁定,苹果可在其 7 月对 OpenAI 提起的商业秘密诉讼中加速获取 OpenAI 的招聘材料,包括前苹果员工应聘 OpenAI 消费硬件与机器人团队时的面试清单、指南、手册、脚本及涉及苹果技术的演示记录。
OpenAI 称在办公室发现一台隐藏的“复杂录音设备”,35 岁工程师 Abdulrahman Alfozan 因涉嫌使用或试图使用设备截取口头通信被捕。
Higgsfield 借助 GPT-6 Astra 将 AI 视频生成时长从 1 分钟延长到 10 分钟以上,同时用 GPT-Image-2.5 提升画面精度,并通过 GPT-Live 打通语音电影制作路径。
OpenAI 与 Anthropic 代表在英国议会听证会上表示自愿承诺已不足以保障安全,应引入有约束力的法律框架,OpenAI 副总裁 Tom Duff Gordon 支持法定框架和国际公约并称事件报告应属强制。
406 名科学家签署公开信,要求加强 AI 安全研究,并通过物理隔离将 AI 模型与外部网络断开,签名者包括 Geoffrey Hinton、Yoshua Bengio、Stuart Russell、Yejin Choi 和 Bernhard Schölkopf。
UC Berkeley 荣休教授 Michael I. Jordan 在接受 Libération 采访时,将 AI 末日论和"超级智能"称为科幻,并批评 AI 公司呼吁监管是"作秀"。
AI 聊天平台 Character.ai 已申请破产并挂牌出售,交易预计在 2026 年 12 月初完成,若无人接手服务将关停,期间平台和订阅仍照常运行。公司将原因归于儿童伤害相关诉讼、监管压力和运营问题,其中涉及一名青少年自杀。
推荐理由:从 2024 年 27 亿美元交易到如今破产出售,这条时间线便于读者看清明星 AI 聊天产品的商业退场路径。
维基百科人曾预言 AI 会像风暴般袭来又退去,现实却是到 2026 年 3 月,因 AI 生成内容频繁违反核心原则,维基百科已全面禁止用大语言模型撰写条目,仅允许其用于翻译和校对。2024 年 8 月一项普林斯顿大学研究显示,当月近 3000 篇新建英文条目中约 5% 含大量 AI 生成内容,一篇广为流传的《维基百科之死》警告这或将引发贡献者流失与 AI 填充的恶性循环。
亲 AI 超级 PAC 网络 Leading the Future 被指向 Nevada 多家疑似空壳公司输送数百万美元,其中 Lantern Production Consultants LLC 自去年以来从 Think Big 获得约 2000 万美元,用于民调、数字广告、研究和策略等服务。
Anthropic 发布报告称,中国公司 Z.ai 于 8 月发布的模型 GLM-5.3 可被任何人自由下载和修改,构成重大网络攻击风险。开放模型可下载、可重训、可观察内部结构与思维链,且通常比闭源模型成本更低;Artificial Analysis LLM 榜单前八名目前均为闭源模型,但开放模型在开发进度上仅落后数月。
NVIDIA 宣布计划投资 Doctolib、Entalpic、Genesis AI 和 Pigment 四家法国初创公司,分别覆盖医疗智能体、原子级材料工程、通用机器人和企业规划平台。NVIDIA 在欧洲的技术生态投资已接近 100 亿美元,此前还投资过 Alice&Bob、Gradium 和 Scintil Photonics。
Amazon Bedrock 面向亚太五个 AWS 区域提供全球跨区域推理,可调用 OpenAI GPT-6 Sol、GPT-6 Luna 和 GPT-6 Astra。
微软总裁 Brad Smith 呼吁紧急监管 AI,认为英国比美国和欧盟更适合主导全球 AI 安全规则,因华盛顿不把伦敦视作布鲁塞尔那样的监管中心,这反而是优势。他批评白宫签署的"道德约束"文件仅属自愿性质,只有"好公司"才会遵守,并提出对 AI 系统遭失控智能体入侵的法定通报义务、发布前外部评估及 kill switch 等规则。
微软计划从 2027 年起以多吉瓦规模部署 Azure Maia AI 芯片,使其成为公司各产品的主要推理系统,高管 Scott Guthrie 撰文说明了这一计划。
白宫撤销了此前阻止英国 AI 安全研究所(AISI)访问新 AI 模型的决定,Anthropic、Google DeepMind 和 OpenAI 将重新向该机构提供模型早期访问权限。
Andrej Karpathy 把大语言模型的用户分成四个层次,认为外界只看到了 AI 实际能力的预览。约 60 亿人几乎没接触过 LLM,10 亿至 20 亿人把它当作更好用的搜索引擎或写作辅助,约 2000 万数学与代码领域的专业用户已看到智能体用一句提示完成过去数周乃至数月的复杂项目,而约 5000 人能接触到内部前沿系统。
CloudZero 创始人兼 CTO Erik Peterson 指出,AI 账单数据不可信,即便是做云与 AI 成本管控的公司也无法完全信任自己的账单。他提到 "tokenmaxxing" 这一成本约 50 亿至 150 亿美元的虚荣指标,并称 AI 支出已增长约两倍且仍在上升。
MarkTechPost 按官方产品、定价与文档页面核验了 12 款 AI 实时翻译工具,覆盖消费应用、会议插件、活动平台与开发者 API。
在特朗普宣布将 AI 改称"超级智能"后,硅谷多位高管相继跟进:马斯克承诺将 SpaceXAI 更名为 SpaceXSI,Marc Benioff 宣布 Salesforce 将 AIForce 改名为 SIForce,Nvidia 将 10 亿美元科研投入中的相关方向表述为"super intelligence research"。
Amazon Bedrock 在 9 月上线 OpenAI 的 GPT-6 Astra、Sol、Luna 系列模型,GPT-6 Astra 支持最高 100 万输入 token,Ultrafast 档推理速度最高提升 6 倍、达 300 token/秒。
MIT Technology Review 刊文指出,AI 的拒绝机制正成为安全布局的承重墙,却因概率性而难以可靠。OpenAI 曾招募数十名红队成员用数千条查询测试 ChatGPT,结果部分有害请求仍被拒绝、部分则未被拦下。文章警告,拒绝失效可能造成灾难性后果,而拒绝范围过宽则可能被用来压制合法言论。