服务对象与地域限制
PuppyIP 仅面向海外合规企业及其授权人员提供服务,不面向中国大陆地区开放或提供代理服务。本服务仅限用于中国大陆境外的合法业务活动,严禁在中国大陆境内使用本服务。
代理 IP 或服务器位于境外,不改变上述限制。不得通过中转、转接、共享或转售向中国大陆境内的最终使用者提供本服务。使用前请阅读用户服务协议。
本文要点
- 它是多模态嵌入模型:用向量寻找相近内容或匹配意图,不等于直接生成聊天回答。
- 公告给出 Gallery 图片搜索、视频片段查找演示,以及实验性 Foresight Mac 应用;具体设备和商店地区可用性仍须按对应入口确认。
- MediaPipe Tasks 提供较完整的预处理与检索路径;需要自行控制处理和加速时,可以关注 LiteRT 与预量化 .litertlm 模型包。
- ML Kit 的 Android 接入、NPU 加速和自动模型更新,在 10 月 6 日原文中属于后续计划;生产集成前应查看后续版本说明。
先分清:它找相近内容,不直接写答案
Google AI Edge Team 和 Android ML Team 于 2026 年 10 月 6 日介绍了 EmbeddingGemma 2 的端侧应用。这个 740M 参数、开放权重的模型,把文字、图片、视频帧和音频映射到统一向量空间,适合本地媒体检索、片段定位和意图匹配。
向量可以理解为便于比较内容含义的一组数字。用户输入描述后,系统把查询与已索引媒体进行相似度比较,返回较接近的内容;它不需要先为每张图片生成文字说明,也不意味着模型会直接写出聊天答案。
试用思路:先看示例,再用不敏感的样本
先从公告中的 Google AI Edge Gallery 入口,查看自己设备可获取的版本,并从应用提供的示例图片集开始。公告指向 Android 和 iOS 下载入口,但没有给出所有设备、系统版本和商店地区的完整支持表。
接着用 Instant Media Search 比较文字查询与图片查询:前者描述想找的画面,后者用一张示例图寻找相关内容。公告展示了逐字输入时更新排序,以及使用手机图片或相机画面检索的方式;关注的是匹配结果是否符合你的检索意图。
最后再选择一段不含私密信息的自有样本视频,理解 Video Moments Finder 的流程。例如,假设视频里有运动片段,可以尝试描述某个动作,观察索引后的时间点匹配。这个假设场景帮助理解查询与视频片段的关系,一次匹配不代表所有视频都能准确识别。
Mac 用户可关注 Foresight,但先按实验性应用理解
公告同时宣布了面向 Mac 的实验性 Google AI Edge Foresight。它结合 EmbeddingGemma 2 与 Gemma 4,在本地处理会议转写、笔记和文件检索,并利用从当前对话找回的内容补充简短笔记;这是一条应用体验路径,不是 Gallery 的另一个模型安装步骤。
Google 对这些功能的描述强调本地处理和离线使用。涉及系统音频、麦克风、会议或文件时,仍应按实际应用权限与组织规则选择资料;本地运行不等于获得处理任何内容的许可,也不自动说明其他集成会采用同样的数据路径。
MediaPipe 偏向现成流程,LiteRT 留出更多控制
对开发者,公告描述了 MediaPipe Universal Embedder 与 Semantic Retriever:前者处理媒体预处理和向量生成,后者负责本地索引及相似内容检索。它还介绍了 Decision Task,用输入与候选标签的匹配来做意图路由;这些能力的具体接口版本,应以目标平台的对应文档为准。
需要更细地控制预处理、部署与加速时,公告给出的另一条路径是 LiteRT,并提供预量化 .litertlm 模型包的下载方向。它描述同一模型文件在受支持端侧平台使用 CPU 或 GPU 的方式;平台名单并不等于每台硬件都具备相同性能或 NPU 支持。
ML Kit 的后续计划,别读成今天的统一可用性
10 月 6 日公告把 Android ML Kit 接入写为未来几周的计划,目标是提供平台集成路径,减少开发者自行管理模型的负担。该计划还包含可用时使用 NPU 加速,以及自动模型更新;这些内容不能仅凭这篇公告写成已经向全部设备开放。
原文没有给出这部分后续完成日期或当前可用接口版本,因此也不能反过来断言它截至 10 月 15 日仍未上线。准备生产集成时,应先查看目标 ML Kit 版本的发布说明、设备支持和模型管理方式,再决定采用哪条路径。
小模型仍要核对内存、许可和成本范围
公告以 Google Pixel 11 Pro 为例:仅使用文本权重时,活跃内存约为 191 MB;完整多模态模型约为 567 MB。它还介绍了按需加载模态编码器的设计。这些数字对应特定设备和配置,不能当作所有部署的统一最低内存。
开放权重与软件许可、设备成本、云服务收费是不同问题。公告只对 Foresight 的本地应用体验提到无需云订阅费用,没有给出所有工具的统一价格或商业授权承诺;选定模型包和组件后,还应分别查看适用许可与下载条件。
资料来源
常见问题
拿到模型包后,自己的照片和视频就能立刻搜索了吗?
模型包不等于已经建好的媒体索引。公告描述的图片流程先生成向量并保存在本地 SQLite 数据库,视频流程则先为视觉和音频片段建立索引。初次准备、媒体格式和资料规模的限制,要按所选应用或实现确认,不能从检索演示推定所有文件都已处理。
本地离线运行,是否意味着首次安装也完全不需要网络?
应把获取应用、获取模型和执行检索分开。公告描述的是相应模型计算与应用功能可以在设备上离线执行,没有为所有平台承诺首次安装、下载和后续更新全程断网。先准备好所需文件,再按目标应用的实际行为确认离线范围。
可以直接把模型放进商业产品吗?
这篇公告把模型称为开放权重,但没有列出完整商业许可、分发义务或全部依赖组件的条件。商业集成前应查看所选模型包与组件的许可及下载要求;不能把开放权重或 Foresight 无云订阅费用理解为所有商业用途都不受限制或没有成本。