T5Gemma 2 - 谷歌开源的新一代编码器-解码器模型

T5Gemma 2 是谷歌开源的新一代编码器 - 解码器模型,基于 Gemma 3 架构升级而来,具备多模态和长上下文处理能力。支持文本和图像等多种数据类型,能处理超长上下文(最高 128K),在生成质量上显著优于前代模型。模型采用词嵌入绑定和合并注意力等创新架构,有效降低参数量并提升效率,同时开箱即用支持 140 多种语言。在多模态、长上下文处理、代码生成、推理和多语言等任务上,T5Gemma 2 均展现出卓越性能,超越了对应规模的 Gemma 3 模型。T5Gemma 2 - 谷歌开源的新一代编码器-解码器模型

>>展开阅读