2025-01-15 数码 0
据外媒MSPoweruser报道，GPT代表了一个先进的语言模型系统，由Alec Radford所创造，并于2018年由埃隆·马斯克的OpenAI实验室发布。该系统采用了一种独特的生成式语言模型技术，通过对广泛文本材料进行预训练，它能够理解和处理复杂的长期依赖关系。
在2019年2月，OpenAI宣布推出GPT-2，这是一个无监督的转化语言模型，它在800万份文档上进行了训练，这些文档占用了40GB空间，其中包括Reddit用户分享的文章。然而，埃隆·马斯克对于公开此技术持有保留态度，因为他担忧它可能被用于散播虚假新闻。
2020年5月，OpenAI又推出了GPT-3，这个模型参数量比GPT-2大多一个数量级（1750亿参数与15亿参数相比），其性能也得到了显著提升。这种新型语言模型可以接受任何文本提示，并返回一篇完整且符合模式的文本。在编程方面，只要向它展示几个希望实现的事例，它就能提供一篇完整的小说或故事。
除了这些应用之外,GPT-3还可以作为一种搜索引擎或者神秘解答工具，即使是解释那些难以捉摸的问题。这让人不得不思考是否已经接近开发出一种能像人类一样理解、推理和交流的人工智能。不过，对于此类突破性成就，OpenAI警告指出他们遇到了扩展性的挑战：虽然GPT-3需要每天几千petaflop/s计算能力，而仅需几十petaflop/s日计算能力即可完成同样工作量的大型版本-GPT-2。
欲了解更多关于GPT系列产品及其功能，请访问GitHub上的相关资料。
