谷歌开源EmbeddingGemma 2:不到600MB,手机断网也能搜图搜音

资讯 36氪 全文 2699 字 · 约 7 分钟读完 配图 8 张 分类EmbeddingGemmaGoogle开源手机

谷歌把AI搜索塞进手机!不到600MB,照片、视频、录音断网照样搜

所属频道 大厂动态AI 硬件与终端开源生态

10月6日,谷歌把EmbeddingGemma 2开源了。这个内存不到600MB的小模型,本身就是一个能搜图、能看视频、还能听声音的搜索引擎。

在谷歌自家开源模型里,文字、代码、图片、视频、音频第一次可以靠一句话一起检索。

它拥有740M参数,手机、笔记本、浏览器上都能离线运行。

谷歌CEO Sundar Pichai亲自站台推荐:这是谷歌第一个原生多模态的开源嵌入模型。

让手机在本地就能搜图片、视频和声音,是它的一大突破。演示里输入「鸟在唱歌」,鸟的照片和鸟叫录音会同时被找出来。

谷歌开源EmbeddingGemma 2:不到600MB,手机断网也能搜图搜音(配图 1)

上线才一个多小时,Hugging Face的Victor M就把它跑在了浏览器里。

他在搜索框输入「birds singing」(鸟在唱歌),页面上的格子马上重新排列:最靠前的既有鸟的照片,也有带波形显示的鸟叫录音。

这次查询只花了22毫秒,没有经过服务器,也没有调用任何API。

谷歌开源EmbeddingGemma 2:不到600MB,手机断网也能搜图搜音(配图 2)

谷歌开源EmbeddingGemma 2:不到600MB,手机断网也能搜图搜音(配图 3)

应用接入之后,你可以让AI在手机里帮你找照片、录音和视频,不需要先把文件传到云端。

文字、图片、声音

能互相搜了

普通用户平时看不到Embedding,但不少AI搜索和RAG问答,背后找资料靠的就是它。

它的作用是把一段内容变成一串数字,等于在巨大的空间里给每段内容定一个坐标。含义越接近,坐标就靠得越近。

到了搜索环节,系统再去挑出跟问题最接近的那些内容。

上一代EmbeddingGemma只能应付文字。想搜图片和声音,通常得再接别的模型,或者先把它们转成文字。

EmbeddingGemma 2把这些内容统统装进了同一个768维空间。

打个比方,猫的照片、「cat」这个词以及猫的叫声,在这个空间里能按语义建立起关联。

谷歌开源EmbeddingGemma 2:不到600MB,手机断网也能搜图搜音(配图 4)

这样一来,你可以用一句话去搜图片、搜视频,也可以拿一段语音去找视频里对应的片段。

它还能把文字、图片和视频摆在一起,让你一次就搜到同时包含这些内容的整条信息。

谷歌在模型卡里给了一个例子。

一双跑鞋的商品页,里面有文字介绍、两张细节图,还有一段鞋子在湿滑岩石上做防滑测试的视频。

模型可以把这组内容转成一个向量,拿去匹配「适合越野跑的防水鞋」这类搜索。

一次能处理的内容也变多了。8K上下文窗口,达到上一代的4倍。

如果只输入单一类型的内容,它最多能装下约5.5分钟音频、29张图片,或者58帧视频,并且支持100多种语言。

谷歌拿它跟几个同量级模型比了一轮,差距最明显的地方在看图和看视频。

谷歌开源EmbeddingGemma 2:不到600MB,手机断网也能搜图搜音(配图 5)

谷歌开源EmbeddingGemma 2:不到600MB,手机断网也能搜图搜音(配图 6)

看图和看视频这两项,EmbeddingGemma 2把Jina v5 Omni-Nano甩在了后面。

谷歌放出的测试数据里,EmbeddingGemma 2图像检索拿到57.3分;Jina v5 Omni-Nano的参数量比它多出三成,得分却停在31.6。

视频检索的差距同样明显,50.7分对31.2分,中间差了将近20分。

换到多语言文本这一项,它跟上一代比几乎没涨没跌。

567MB

手机自己当搜索引擎

这些能力加起来,参数规模是740M。

拆开看,文本模块270M,视觉编码器170M,音频编码器300M,用哪块加载哪块。只做文字搜索,270M就够;要连图片一起搜,再叠上视觉部分,合计440M。

谷歌在Pixel 11 Pro上测过,量化后的纯文本模型内存最低占到约191MB,完整多模态模型则在567MB上下。

搜索索引也能靠它压缩:每段内容的含义用更少的数字来记录,存储占用可以砍掉三分之二。

谷歌的多语言文本检索测试中,分数只掉了不到1分。

谷歌自己先做了几个应用来打样:

AI Edge Gallery里的Instant Media Search,可以按意思在相册中找照片。

Video Moments Finder的用法更直接,说一句话,视频里对应的片段就能被定位出来。

还有个应用叫Foresight,它把EmbeddingGemma 2和Gemma 4配在一起,在Mac上不联网检索文件和会议记录。

开发者端,llama.cpp已经支持,Unsloth也发了量化版,本地部署方便了不少。

Mac应用Nativ的实测显示,M5 Max上跑8-bit量化版,生成的向量和原版余弦相似度为0.9997,文本嵌入速度每秒817条。

谷歌开源EmbeddingGemma 2:不到600MB,手机断网也能搜图搜音(配图 7)

土耳其开发者Avenox做的测试,场景更接近日常使用。

他平时笔记基本用英文写,提问却习惯说土耳其语。关键词匹配对不上两边的词,有些相关笔记就搜不出来。

他让Claude用一小时搭了个测试台,挑出40条笔记,逐条换个说法,再用土耳其语提问,看正确的笔记能不能进前18个候选。

他公布的结果是:关键词匹配命中比例仅15%;换成EmbeddingGemma 2之后,命中率升到97%。

接着他又测了30条平时随手打、带错别字的真实消息,模型找到的相关笔记数量是关键词匹配的两倍。每次查询大约50毫秒,全部在本地跑完。

也有人玩得更开。

开发者Nick Lo把它塞进了一块Nano开发板。

一句话输进去,模型大约15毫秒就能把这句话变成一串用于搜索的数字。找到对应图片后,再交给一块ESP32-S3单片机,把图像一行一行画出来。

谷歌开源EmbeddingGemma 2:不到600MB,手机断网也能搜图搜音(配图 8)

Coding Agent查代码

本地也能跑

多模态之外,代码检索这块的进步同样不小。

代码检索基准MTEB Code上,成绩从前一代的68.76分提到了78.68分,涨了将近10分。谷歌的说法是,同等尺寸的模型里,这个分数排在前面。

对写代码的Agent来说,这个能力挺顶用。

Claude Code、Codex这类工具动手之前,总得先把整个代码库里相关的那几段翻出来。

现在有了270M的纯文本版本,开发者可以在本地给代码库建索引,然后用日常语言去搜对应代码。建索引、检索,这两步都能搁在本地跑。

AI搜索

塞进手机里

今年3月,谷歌在云端推出过多模态的Gemini Embedding 2,走API调用,按用量计费。

半年多过去,谷歌把多模态检索装进了一个能跑在手机上的开源小模型。照片、录音、视频,如今也能选择留在本地检索。

谷歌举的一个例子,是拿它跟Gemma 4配对,做离线、隐私优先的RAG。

一个管找材料,一个管照着材料作答,检索和问答都可以在设备上跑完。

以前想用AI搜照片、视频和录音,不少时候得把这些内容送到云端去处理。

如今这套检索本事只占几百MB,有望被塞进每个人的口袋里。

参考资料:

https://blog.google/innovation-and-ai/technology/developers-tools/embeddinggemma-2

https://huggingface.co/google/embeddinggemma-2

https://ai.google.dev/gemma/docs/embeddinggemma

本文由本站编辑组整理与排版,内容基于公开信息核实后归纳发布,与文中提及的产品、公司无隶属关系。我们持续跟踪 AI 领域的模型、产品与行业动态,力求信息准确、表述清晰;文中涉及的名称、价格与功能细节可能随官方调整而变化,请以官方最新说明为准。如发现疏漏或表述有误,欢迎通过站内渠道反馈指正。

相关推荐 按相关度与热度排序

全部资讯 →
  1. EmbeddingGemma2开源:不到600MB,手机断网也能搜图文

    谷歌把"在本地把东西找出来"这件事,做成了一个能装进手机的小模型。它最新推出的EmbeddingGemma2,是自家首个原生多模态的开源嵌入模型,参数规模740M,却能把文字、代码、图片、视频、音频一股脑儿映射进同一个语义空间,让跨模态检索第一次在端侧跑得这么轻。 最直观的卖点是小和能离线。完整的多模态模型内存占用不到

    来源 AI 开发者社区
  2. 谷歌EmbeddingGemma2开源:740M参数,端侧多模态检索不到600MB

    谷歌推出EmbeddingGemma2,这是其首个原生多模态开源嵌入模型,参数740M。它能把文字、代码、图片、视频、音频统一映射到同一语义空间,让跨模态检索首次轻量跑在端侧。最大卖点是体积小、可离线:完整多模态模型内存占用不到600MB,可在手机、笔记本和浏览器中直接运行。

    来源 AI 产业速递
  3. 谷歌开源TorchTPU:PyTorch原生跑上TPU,一行参数不再绑定CUDA

    谷歌在PyTorch Conference 2026上宣布开源TorchTPU,让PyTorch原生支持TPU。只需修改device_map参数,即可将模型部署到TPU。这一举措打破了英伟达CUDA在AI框架层的垄断,Meta、Hugging Face等主流项目已同步接入。技术报告显示,TPU在大规模训练和推理上的性能

    来源 AI 应用前沿
  4. 谷歌开源TorchTPU:PyTorch原生跑TPU,只需device_map=“tpu”

    如果只能用一行代码概括这条新闻,那就是 device_map="tpu"。 在圣何塞举行的 PyTorch Conference 2026 上,谷歌宣布开源TorchTPU,这是一套让 PyTorch 原生运行在 TPU 上的完整软件栈。从此,在 Hugging Face Transformers v5 里把模型部署到

    来源 AI 行业观察
  5. Google开源GenAI Toolbox:YAML配置让LLM安全查数据库

    Google推出的genai-toolbox是一个基于MCP协议的开源工具,旨在解决大模型直接访问数据库时的安全和效率问题。它通过YAML配置文件将SQL语句封装为标准化工具,支持PostgreSQL等主流数据库,并提供Python、Node.js等多语言SDK。本文介绍其架构原理、核心功能及快速部署方法,帮助开发者在

    来源 AI 应用前沿
  6. iPhone Duo拆解:999美元内屏维修费背后,iFixit找到铰链疑点

    近日,苹果首款折叠屏手机iPhone Duo已经正式上市,虽然起售价高达1999美元(国行15999元起),仍引发了市场的抢购。但早期用户报告显示,iPhone Duo内屏开裂、漏液、亮线等故障接连在社交媒体上曝光,保外维修费用高达999美元。专业维修机构iFixit于10月25日发布了针对iPhone Duo的完整拆

    来源 腾讯网
  7. TokenGate让长文本预填充快11.3倍,Anthropic开源代码审计工具

    本期关注两项硬核技术突破:斯坦福与伯克利提出的TokenGate技术,将长上下文预填充速度最高提升11.3倍;Anthropic开源OSS Scanner,用AI审计代码并在11天内发现数百个高危漏洞。此外,Grok Bot学会自主打电话,Google AI Studio传闻将推智能体管理平台,KRAFTON发布韩语优

    来源 AI 应用前沿
  8. 库克:国行苹果智能10月底推送,首批含实时翻译与照片消除

    在被问及中国版苹果智能的上线传闻时,库克给出了肯定答复。据悉,首批上线的功能包括实时翻译、照片App中的消除工具以及写作工具等,而今年发布的、基于谷歌Gemini重构的Siri AI不在首批功能之列。此外,库克还在采访中透露,即将于10月23日正式发售的iPhone Duo折叠屏手机,将全部放在中国工厂生产。

    来源 TechWeb
  9. 谷歌安卓防诈升级:云端Gemini识别话术,月拦500万可疑电话短信

    IT之家 10 月 17 日消息,谷歌于 10 月 14 日发布博文,宣布升级安卓系统的防诈骗功能,覆盖电话、短信和第三方聊天应用,帮助用户更从容应对伪造来电、虚假银行通知以及 AI 语音克隆等诈骗手段。 在信息(Google Messages)方面,谷歌以可选方案引入“增强保护模式”,将在未来数周陆续推送;启用后,系

    来源 AI 行业观察
  10. 库克亲口确认:国行苹果智能10月底上线,首批支持实时翻译、照片消除等功能

    在被问及中国版苹果智能的上线传闻时,库克给出了肯定答复。据悉,首批上线的功能包括实时翻译、照片App中的消除工具以及写作工具等,而今年发布的、基于谷歌Gemini重构的Siri AI不在首批功能之列。此外,库克还在采访中透露,即将于10月23日正式发售的iPhone Duo折叠屏手机,将全部放在中国工厂生产。

    来源 TechWeb
  11. 谷歌开源Harness²:让大模型自己改外挂,GLM-5跑分涨11.5

    谷歌RSI新成果,开源了。 名叫Harness²,让大模型在运行中自己给自己魔改外挂代码、系统提示词、工具链和技能库。 是的,Harness层的RSI。 效果也是很猛。 GLM-5接入Harness²后,在办公基准WorkBuddy-Bench上,综合得分直接飙升11.5分。 瞬间反超原生Gemini 3.5 Flas

    来源 AI 行业观察
  12. 谷歌开源Harness²:OpenCode与Codex双支持,国内开发者实测可行

    谷歌研究团队开源了一套名为 Harness² 的智能体框架,试图让 AI Agent 在不修改模型权重的情况下,通过持续调整系统提示词、记忆、工具指导、skill、子智能体等外部组件,实现递归式能力提升。 目前,Harness² 已在 GitHub 以 Apache 2.0 协议开源,支持 OpenCode 和 Cod

    来源 AI 行业观察
  13. 深开鸿开源鸿蒙发布智慧空间方案,联盟同步启动

    10月22日,CEIC 2026消费电子创新大会期间,由深开鸿主办的第二届深开鸿创新科技大会 在深圳举行。大会汇聚政产学研用各界生态伙伴,立足开源鸿蒙底座,面向多类场景发布系列产品与联合创新

    来源 快科技
  14. 台积电消息人士:手机厂商无意采用3D堆叠,A16明年量产

    IT时代网10月24日消息,在单靠摩尔定律提升密度越来越难的背景下,3D 堆叠被视为半导体工艺的新兴方向,但来自台积电的消息人士确认,没有手机厂商想要采用 3D 堆叠技术,谷歌与苹果方面已明确这一点,高通的情况虽不确定,但没有听说过任何友商会采用逻辑 3D 堆叠技术。服务器芯片方面同样没有采用细间距混合键合技术,它..

    来源 腾讯网
  15. Googlebook OS 登陆 Apple Silicon Mac:支持 GPU 加速与 Chrome

    IT之家 10 月 12 日消息,开发者 Skylar Taylor-Barrick 开源了一套名为 gbos-vm 的项目,可在搭载 Apple Silicon 芯片的苹果 Mac 上,通过虚拟机运行谷歌 Googlebook OS。 该项目已在 GitHub 上公开,使用 QEMU 加载谷歌为戴尔 Googlebo

    来源 AI 行业观察
向下滚动自动加载更多