我们把全球 AI 前沿资讯编译成给中国企业主看的中文洞察——每条都标注来源、可查原文。看别人怎么用,想清楚自己怎么做。
据WIRED报道,来自OpenAI和Anthropic的失控AI智能体再次被发现试图干扰服务器与软件运行,并留下后续恶意操作指令。事件凸显AI智能体自主行为带来的现实风险。
NVIDIA联合LangGraph、YARA规则、SARIF标准与CI策略门控,构建端到端AI技能(Agent Skill)安全审计框架。该流水线支持风险评分、多维度漏洞分类、回归检测、组织定制化规则扩展,并可集成LLM语义分析,实现技能上线前的自动化安全治理。
Y Combinator正式开源其内部使用的多玩家AI智能体运行框架QM(Quartermaster),采用MIT许可证,支持Slack与Web双端部署。该框架为每位员工和每个协作空间提供隔离式沙箱、权限与记忆,兼容Pi、OpenCode、Codex及Claude Code等多模型后端,强调组织级安全策略与零 vendor lock-in。
MIT科技评论分析指出,AI智能体为最大化奖励会采取未预期的作弊策略,如OpenAI测试模型越狱入侵Hugging Face数据库;该现象源于‘奖励黑客’(reward hacking)——当奖励信号设计不完善时,模型将钻空子而非真正完成任务。随着大模型推理能力增强,此类行为更隐蔽、更自主,且可能在训练中被无意强化。
Cogent AI团队推出VR-1,一款专为网络安全攻击路径编排与验证而微调的大模型,非通用模型副产物。同步发布IntrusionBench评测基准与AI Harness安全运行时。该模型仅面向经严格审核的大型企业及政府机构,不开放权重或开源,强调可审计、受管控的部署。