谷歌Gemma:参数不止70亿,设计原则很独特

[db:摘要]

谷歌推出全新的开源模型系列「Gemma」,Gemma 与 Llama 2、Mistral 相比表现出色,具有独特的设计原则。Gemma 使用GeGLU激活函数,参数规模较大但能够取代其他开源模型,展示了强大潜力。

本文由「aiuc」编辑整理,文章链接:https://www.aiuc.net/21247

该文观点仅代表作者本人,平台仅提供信息存储空间服务。

(0)
aiucaiuc
上一篇 2024年2月28日
下一篇 2024年2月28日

相关推荐

发表回复

您的邮箱地址不会被公开。 必填项已用 * 标注