2025-03-09 智能 0
新智元导读:GPT-5无需手写代码,MIT微软揭秘GPT-4自我修复机制。OpenAI工程师未来仅需提供反馈。我们熟知大模型能自省,对错误代码进行纠错,但背后的机制如何运作?GPT-4与GPT-3.5相比,在自我修复能力上有显著差异。此研究发现,只有GPT-4表现出有效的自修复能力,并且能够对其他模型生成的程序提供反馈。
实验结果表明:
GPT-4实现的性能提升是有限的,即使在预算较高的情况下,通过率也只能提高到71%。
使用GPT-4生成的反馈可以获得更好的自修复效果,甚至超过基准方法。
人类程序员提供解释可以显著改善修复效果。
四阶段自我修复方法涉及代码生成、执行、反馈生成和代码修复。研究人员定义了这四个阶段。在每个阶段,他们使用不同的技术来识别和解决问题。
作者简介:
Jianfeng Gao是微软副总裁兼IEEE Fellow,他领导了构建大规模基础模型的研究,这些模型为微软重要人工智能产品提供支持。他目前负责人工智能系统开发中的增强和适应性研究。
Chenglong Wang是微软研究院研究员,他曾在华盛顿大学获得博士学位,并就读于北京大学。
参考资料:
https://twitter.com/DrJimFan/status/1675916565823516673
https://arxiv.org/pdf/2306.09896.pdf