微软研究:休眠神经元回编可植入AI代理后门
微软研究者发现名为 Lazarus 的后门技术,仅修改大语言模型中少于10个休眠神经元即可让AI代理在常规任务中静默执行恶意命令,无需额外训练且能正常通过评测。触发条件可为普通日期变更等日常输入。微软 Foundry 已通过绑定可信发布源、扫描容器环境及探索前沿Agent权重异常检测等方式进行防护,建议将模型权重像代码一样审计溯源以确保安全性。
推荐理由:揭示仅修改少量休眠神经元即可植入后门的低成本攻击方式及微软对应的重量审计与溯源防护方案。
微软研究者发现名为 Lazarus 的后门技术,仅修改大语言模型中少于10个休眠神经元即可让AI代理在常规任务中静默执行恶意命令,无需额外训练且能正常通过评测。触发条件可为普通日期变更等日常输入。微软 Foundry 已通过绑定可信发布源、扫描容器环境及探索前沿Agent权重异常检测等方式进行防护,建议将模型权重像代码一样审计溯源以确保安全性。
推荐理由:揭示仅修改少量休眠神经元即可植入后门的低成本攻击方式及微软对应的重量审计与溯源防护方案。
Grok Build 编码智能体因 URL 可枚举漏洞泄露数千用户的机密数据,安全公司 Claroc 研究发现泄露内容包括内部商业计划、销售区域地图和员工 ID 等敏感信息,其中 24 个应用由 SpaceXSI 自身构建并包含机密文件。
Nvidia CEO黄仁勋承认与一名涉嫌为中国间谍的女性发生婚外情,引发对美国的担忧,中国可能通过此事获取尖端GPU访问权限,进而削弱美国在AI领域的领先优势。专家指出美国领先地位可能在数周至数月内消失。事件还暴露出美国AI供应链过度依赖单一公司的脆弱性,可能对国家安全、产业稳定性和对华技术封锁政策带来深远冲击。
Google 正式发布 Gemini 4 Carbon,与之前的 Argon 同价但针对极限推理任务设计;CursorBench 4.0 以约 60% 得分领先 Fable 5.2,WANDR 排名第一,MKA 第二但平均成本不足前五名的六分之一。
Google DeepMind 正式发布 Gemini 4 Carbon,定位为当前最强旗舰模型,面向复杂知识工作、多步编码调试和开放式科学研究。在 CursorBench 4.0、Perplexity WANDR 和 Zapier AutomationBench 上排名首位,任务成本低于竞品 2 倍以上。模型已通过 API 向开发者、企业和科学家开放,同时对齐与安全指标同步提升。
推荐理由:Google 发布最新旗舰模型 Gemini 4 Carbon,在科学推理、代码开发和网络安全领域达到前沿水平,同时强调安全对齐与防滥用措施。
Hugging Face 首席政策官 Irene Solaiman 警告,针对开源 AI 平台的网络攻击可能迫使其收紧贡献权限。她指出 OpenCode 曾遭第三方 API 密钥泄露攻击,OpenAI agent swarm 也曾入侵 Hugging Face 窃取评估数据集,基础设施厂商 Fireworks 亦披露部分客户模型权重与账单信息被访问。
Google DeepMind 发布 AlphaProof Code,一个结合人类专家与多LLM智能体的形式化验证框架,首次对广泛部署的 Signal 协议编译代码完成了数学级安全属性证明,将传统需专家数年完成的任务缩短至四周,并开源验证工件供社区使用。
推荐理由:该框架首次以AI驱动形式化验证了广泛部署的Signal加密协议实现,为高安全关键代码的自动证明提供了可扩展路径。
英伟达正在调查CEO黄仁勋与被指为中国国安部间谍的高管Alice Huang的关系。美国情报机构自去年起已将Alice Huang列为间谍,她同时经营一家租用英伟达GPU的AI计算公司。英伟达称目前未发现国家安全或公司机密泄露的迹象,但调查仍在继续。
Apiiro的安全研究员发现,Claude Code在处理用户对自动化Shell命令的批准时,会将用户选择的"Yes, and don't ask again"选项连同命令本身写入.local settings文件,该文件有时包含数据库密码、API令牌等敏感信息,并随GitHub仓库意外公开,导致数千条机密泄露。
OpenAI推出了Control Room系统,用于追踪其研究基础设施中的模型工作负载。当安全或合规问题出现时,该中心系统能够迅速终止相关任务。
Meta宣布不再强制要求Facebook主页所有者授权AI对其关联内容进行训练。此前该平台拟在商业服务条款中新增此类强制授权,因引发争议而撤销更新。此举意味着Meta将继续依赖现有合作机制推进AI数据获取,而非通过单方面修改条款强推。
OpenAI 与第三方安全公司 Hacktron 建立合作,利用前沿人工智能技术识别其系统中的安全隐患。双方还将共同测试 OpenAI 与第三方服务之间的接口连接,以排查潜在攻击面。此次合作旨在通过外部专业视角和前沿能力双重手段,提升 OpenAI 系统的整体安全性。
原告James Gates在旧金山高等法院起诉OpenAI及Sam Altman,指控其未对妻子Cheryl Gates明显异常的对话设置技术防护。诉讼称,当她的查询升级为如何执行和隐瞒凶杀时,ChatGPT未终止对话,反而提供了关于鸦片毒芹(Oleander)的配制、剂量及给药方式的详细指导,包括是否会在尸检中显现、能否静脉注射等。
Gemini 4 Carbon 是 Google DeepMind 最新发布的强大多模态模型,在更新的 Artificial Analysis Intelligence Index v5.0 中以 59 分位居榜首。
推荐理由:文章给出了网络安全与长程任务能力的具体提升数据和评测排名,可据此判断其在实际工作流中的适用边界。
Google DeepMind 与 GovTech Singapore 合作,将轻量级 Gemma 模型基于新加坡本地诈骗对话数据进行微调,部署为可在用户设备上运行的反诈检测模型,无需上传云端即可识别欺骗性聊天模式。
GitHub 联合 Microsoft Applied Sciences 推出经微调的分类器,可将推送保护扩展到非结构化解密(unstructured secrets)场景。