2025-01-28 数码 0
近日，OpenAI 创始人Sam Altman与 Humanloop CEO Raza Habib 以及其他 20 位开发者面对面进行了一场闭门交流，交流中他们讨论了 OpenAI 的近况与未来的规划。HumanLoop 是一家帮助开发者在大语言模型上构建应用的公司。
有参加了此次交流会的开发者表示，因为这是闭门交流会，所以 Altman 在交谈中表现出了开放的心态，讨论内容既涉及开发者面临的实际问题，也延伸到了商业竞争、AI 监管和开源等问题。此次对话的重点内容被 Raza Habib 记录了下来并公布在了网络上。但随后，应OpenAI的要求，此内容已被删除。然而，这一删帖的举动引发了外界的强烈好奇和质疑。
有网友表示：“一家从互联网上收集信息做产品的公司，居然要求从互联网上‘删除’一篇文章，这种行为真的很讽刺。”外界纷纷猜测OpenAI删帖的原因，在 HackNews 上，一位现场的参会者认为之所以删帖是因为 OpenAI 不希望在公开场合谈论一些公司重点规划。
也有网友认为，OpenAI 这种行为有炒作的嫌疑，毕竟 GPU 不足已经不再是什么秘密了，看看英伟达의股价就知道了。OpenAI 也严重依赖 GPU 在 Altman 与 Raza 的讨论中证实，目前 OpenAI 正受到GPU资源的大量限制，因此不少短期计划已经推迟。几家大客户还抱怨了 API 的可靠性和速度表现。Altman 认同这些意见，并解释称主要问题源自 GPU 供应不足。
更长的是32k上下文窗口预计将实现，但进一步扩展需要突破性研究。在微调方面，由于没有使用 Adapters 或 LoRa 等高效方法，所以 Open AI 微调运行仍需大量算力。此外，对于专用容量产品，每个服务都要支付10万美元，不得不预先支付。
由于各 AI 企业对于 GPU 的需求比以往任何时候都要紧迫，大型语言模型和AIGC爆发之后，即使英伟达高端GPU价格每片数万美元也无法满足需求。大型基础设施公司购买它们，而马斯克也曾为他的新 AI 初创公司 X.AI 购买3,000多块英伟达 H100 GPU 芯片，每个超过30,000美元。此外，还有 Meta 和微软是今年英伟达GPU最大买家之一（Meta 可能排名第一，因为Facebook、Instagram、WhatsApp 和 Messenger 应用程序中包含很多 AI 增强功能）。
因此，从 Sam Altman 会说出 Open AI 也缺乏 GPU 的原因。他还分享了解决方案：2023 年是重要的一年，他们有一些令人兴奋的事项和目标，如 GPT-4 价格更低、速度更快，以及不断控制 API 价格来降低“智能实现成本”。未来，将继续扩展到百万 token 上下文窗口，同时提供更多样化数据类型处理能力如文本、图像、音频视频等。这意味着模型将能够理解多种输入数据，但直到解决当前的问题才能广泛开放给所有用户。如果插件尚未完成市场匹配，它们可能不会迅速出现在 API 中。不过，不少开发人员担心最终发布插件可能导致竞争关系，因此使用时感到紧张。Altman 强调不会发布除ChatGPT以外其他产品，他承认平台巨头掌握杀手级应用程序，而 ChatGPT 目标转化其成为改进 API 客户。在监管方面，他呼吁加以监管，但认为当前模型无风险，并反对粗暴监管封禁。他重申开源重要性的信念，并表示考虑开源 GPT-3 模型，但目前未开源主要担忧个人或企业不能托管运行大规模模型。而且尽管人们宣称“超大规模 AI 模型时代结束”，但内部数据表明性能仍遵循扩展定律，即扩大的模型带来更高性能问题只是扩展速度难以维持而不是之前那样快速跨越几个数量级。这对于 AGI 开发时间表具有重大影响，使我们相信 AGI 即将出现。
参考链接：
https://web.archive.org/web/20230531203946/https://humanloop.com/blog/openai-plans
本文转载来源：https://www.infoq.cn/article/xZaNyw2QsZcxmNXUvkZv
