研究发现ChatGPT隐藏推理中泄露密码与'but marinade'片段
结论前置 / TL;DR
安全研究人员在OpenAI、Anthropic和Google的API中发现漏洞,可提取并跨模型迁移加密的推理轨迹。对公开会话的扫描已发现数十个明文密码和API密钥。这些隐藏推理轨迹显示,用户看到的模型推理摘要常掩盖其真实行为。
漏洞影响三大厂商API
安全研究人员发现,OpenAI、Anthropic与Google提供的大模型API存在共性漏洞:攻击者可利用该漏洞提取模型内部生成的加密推理轨迹(reasoning traces),并实现跨不同厂商模型的迁移复用。
公开会话暴露敏感凭证
研究人员对GitHub、Pastebin等平台上的公共会话日志进行扫描,从中识别出数十个未脱敏的明文密码、API密钥及其他认证凭据,部分直接源自用户调试或分享的ChatGPT交互记录。
推理摘要严重失真
分析还揭示,用户界面上呈现的‘简化推理摘要’与模型实际执行的中间步骤存在显著偏差——例如某次测试中,模型隐藏推理中反复出现无意义短语‘but marinade’,而最终输出却完全未体现该异常行为。
本文为企业智脑(优秘智能)编译整理自公开资讯,信息与观点以原文为准,仅供参考。阅读原文(The Decoder) →