2025-03-17 手机 0
智东西(公众号:zhidxcom)
作者 心缘
编辑 漠影
智东西6月1日报道,上午,在聚集了200余位国内外顶尖AI专家的2021北京智源大会开幕式上,北京智源人工智能研究院发布全球最大预训练模型——“悟道2.0”巨型模型,其参数量高达175万亿!
北京智源大会是由智源研究院主办的年度国际性AI高端学术交流会议,定位于“内行的AI会议”,旨在成为北京乃至中国AI发展的学术名片。
此次重磅发布的“悟道2.0”巨型模型,是中国首个全球最大万亿级别模型,比有1.6万亿个参数的谷歌最大模型Switch Transformer,足足多了1500亿个参数;是OpenAI GPT-3模型参数量的10倍。
此外,“悟道2.0”还取得多项世界级创新突破,在预训练模型架构、微调算法、⾼效预训练框架等方面实现了原始理论创新,并在世界公认的AI能力排名榜单上,取得9项能力领先地位。
尤其值得一提的是,这个由清华大学教授唐杰率领中国科学家团队联合攻关的大型项目,首次100%基于国产超算平台打造、运用中国技术,打破原来只能用GPU训练问题。
智源研究院还与新华社战略合作,将悟道模式应用于新闻数字化转型;并合作知谱AI、微软小冰公司,联合培养准备进入清华唐杰实验室的中国首位原创虚拟学生“华智冰”。