前DeepMind高管维尼尔斯:AI自改进将至,但不会引发智能爆炸
结论前置 / TL;DR
前Google DeepMind研究主管奥里奥尔·维尼尔斯认为,AI通过递归式自我改进引发“智能爆炸”的可能性很低。他指出,当前AI虽可将科研效率提升约十倍,但仍受限于‘研究品位’和结果判别能力两大瓶颈,并受奖励黑客攻击与物理定律制约。他已联合杰夫·迪恩等顶尖工程师创立初创公司Discovery Loop,专注突破这些限制。
AI自改进将至,但非‘爆炸式’
前Google DeepMind研究主管奥里奥尔·维尼尔斯(Oriol Vinyals)表示,AI具备自我改进能力是明确趋势,但由此触发所谓‘智能爆炸’(intelligence explosion)——即系统在极短时间内指数级自我强化——极不可能发生。
两大核心瓶颈制约加速上限
维尼尔斯指出,当前AI最多可将科研流程提速约十倍,但面临两个根本性瓶颈:一是生成真正新颖、有价值的研究思路(他称之为‘研究品位’),二是对实验结果做出稳定、可靠的判断。此外,奖励机制被操纵(reward hacking)以及光速等物理极限也构成额外约束。
新创公司聚焦瓶颈攻坚
维尼尔斯已与谷歌资深科学家杰夫·迪恩(Jeff Dean)、桑杰·格玛沃特(Sanjay Ghemawat)和李飞飞团队前成员邱国平(Quoc V. Le)共同创立初创公司Discovery Loop,旨在系统性攻克上述瓶颈。
本文为企业智脑(优秘智能)编译整理自公开资讯,信息与观点以原文为准,仅供参考。阅读原文(The Decoder) →