首页 > 生活分享 > 免费教学 > 90/270亿参数,谷歌发布Gemma 2 AI大语言模型

90/270亿参数,谷歌发布Gemma 2 AI大语言模型

发布时间:2024-06-28 22:52:09来源: 15210273549

 6 月 28 日消息,谷歌公司昨日发布新闻稿,面向全球研究人员和开发人员发布 Gemma 2 大语言模型,共有 90 亿参数(9B)和 270 亿参数(27B)两种大小。

Gemma 2 大语言模型相比较第一代,推理性能更高、效率更高,并在安全性方面取得了重大进步。

谷歌在新闻稿中表示,Gemma 2-27B 模型的性能媲美两倍规模的主流模型,而且只需要一片英伟达 H100 ensor Core GPU 或 TPU 主机就能实现这种性能,从而大大降低了部署成本。

Gemma 2-9B 模型优于 Llama 3 8B 和其他类似规模的开源模型。谷歌还计划在未来几个月发布参数为 26 亿的 Gemma 2 模型,更适合智能手机的人工智能应用场景。

谷歌表示为 Gemma 2 重新设计了整体架构,实现卓越的性能和推理效率。IT之家附上 Gemma 2 主要特点如下:

性能优异:

27B 版本在同规模级别中性能最佳,甚至比两倍于其尺寸的机型更具竞争力。9B 版本的性能在同类产品中也处于领先地位,超过了 Llama 3 8B 和其他同规模的开放模型。

效率和成本:

27B Gemma 2 模型可在单个谷歌云 TPU 主机、英伟达 A100 80GB Tensor Core GPU 或英伟达 H100 Tensor Core GPU 上以全精度高效运行推理,在保持高性能的同时大幅降低成本。这使得人工智能部署更容易实现,预算也更合理。

跨硬件快速推理

Gemma 2 经过优化,可在各种硬件(从功能强大的游戏笔记本电脑和高端台式机到基于云的设置)上以惊人的速度运行。

在 Google AI Studio 中尝试全精度的 Gemma 2,在 CPU 上使用 Gemma.cpp 的量化版本解锁本地性能,或通过 Hugging Face Transformers 在配备 NVIDIA RTX 或 GeForce RTX 的家用电脑上进行尝试。

免费教学更多>>

“新款iPhone降价超千元”,苹果客服回应 摩根士丹利:苹果服务业务前景存变数 vivo Y300GT评测:1.5K电竞屏+8小时王者续航,千元机皇这次稳了? 荣耀GT Pro真的好用 荣耀推出谷歌Veo 2模型支持的图片转视频AI工具 一加新机规格曝光:正面设计对标iPhone,一加13还能打吗? 深度PK,看TCL T6L Pro如何打造画质的“组合拳”! 联想手机海外逆袭成第二!昔日巨头摩托罗拉靠这三招“复活”? 可能是A7M5?索尼新的注册信息再曝光,两款新相机即将登场? 中画幅相机平民化!富士GFX100RF凭啥让专业党破防?三大杀招揭秘 魅族Note 16 Pro:全功能NFC,一碰通行 小米推出米家洗衣机Pro蓝氧洗烘新品:12kg洗+9kg烘首发价2799元 华为与优必选签署全面合作协议 就具身智能和人形机器人开展合作 华为智选5G随身随行WiFi Pro 5上架,1549元 iQOO Neo10 Pro+美图鉴赏 像素风背板独具特色 你是否愿意购买华为手机呢? 夜拍无敌!OPPO Find X8 Ultra上手实测:6499值吗? iQOO新平板在路上,更轻更强 三星Neo QLED 8K QN900F评测:拥抱AI 重新定义家庭影院新标准 三星Galaxy Z Flip FE现身Geekbench:Exynos 2400处理器+8GB内存 一季度全球平板电脑出货量公布:小米首次超越联想排名第三 纯211大学,全国前十强,2025年ABC排名 我国高校大体包含这13个等级 vivo X200S深度测评:直屏旗舰如何定义2025年「苹替」新标杆? 荣耀最美手机!荣耀400系列由肖战代言 一加最狂命名手机曝光,设计截胡红米K80至尊版,盲猜3299元起 消息称华为nova 14系列手机本月见 高端体验平民价格!TCL T6L Pro强势卷入Mini LED市场! 索尼Xperia 1 VII太刚了!4K屏+耳机孔,信仰粉冲不冲? 光之所及,见所未见:埃科短波红外相机产品系列介绍