Google 发布 EmbeddingGemma 2:7.4 亿参数的多模态嵌入模型

Google DeepMind 发布了 EmbeddingGemma 2,这是一个拥有 7.4 亿参数的开源多模态嵌入模型,基于 Gemma 4 架构构建,采用 Apache 2.0 许可证发布。该模型的前代 EmbeddingGemma 1 已有超过 2000 万次下载。

EmbeddingGemma 2 的核心设计特点是模块化和参数效率。纯文本工作负载仅需 2.7 亿参数,用户可根据需求选配视觉编码器(1.7 亿参数)和音频编码器(3 亿参数)。在 Google Pixel 11 Pro 设备上,纯文本模式仅需约 191MB 活跃内存,完整多模态配置需要约 567MB 内存。

该模型支持 8K 令牌的上下文窗口,是 EmbeddingGemma 1 的 4 倍。在多模态输入方面,单次可处理最多 5.5 分钟的音频、29 张图像或 58 个视频帧。

EmbeddingGemma 2 引入了可截断输出机制:输出向量默认为 768 维,可根据应用场景截断到 512、256 或 128 维,存储空间最多可减少 6 倍。官方博客未说明截断后对检索准确率的影响。

在代码嵌入任务上,EmbeddingGemma 2 在 MTEB Code 基准测试中的表现从 68.76 分提升到 78.68 分,提升幅度为 9.92 分。官方博客未公布其他基准测试的对比数据,也未说明与同类开源模型在多模态检索任务中的性能差异。

相关推荐
sbjdhjd1 小时前
智能体开始“动手”之后:OpenAI越权事件、Anthropic算力资本化与开放权重模型竞逐 | AI与SI行业日报整理(9月29日—10月6日)
大数据·人工智能·经验分享·笔记·ai·chatgpt·开源
wflynn3 小时前
GitHub 今日推荐|lightcraft:纯 Rust 重写的 RAW 照片开发工具
rust·开源·github·lightroom·art·photography
秋天的一阵风3 小时前
🚀 nacos-web-config:运营半夜改条配置,网页秒更新 —— 不用发版、不用轮询,我把它开源了
java·前端·开源
林伽一3 小时前
从2048并发会话到501B开源模型,算力账本开始按“单位卡产出“计价|2026年10月07日
人工智能·安全·ai·开源
wflynn3 小时前
GitHub 日榜趋势速报 | 2026-10-07
开源·github
孟陬3 小时前
#教程 dw, dm, dy, d18m 是何意?万物可 Badge | 定制漂亮精致小徽章,打造眼前一亮 README
npm·github
夏文强4 小时前
国产开源反攻海外:GLM-5.3 进 Cursor,CursorBench 开放权重第一
人工智能·开源·大模型·glm·智谱
爱写代码的倒霉蛋4 小时前
新手如何借助agent改造github项目(保姆级教程)
github·新手友好·改造项目