原生多模態嵌入
將文字、程式碼、圖片、影片與音訊映射至同一共享嵌入空間,支援不同媒體類型之間的語意比較。
EmbeddingGemma 2 是 Google DeepMind 開放且輕量的多模態嵌入模型。它會將文字、程式碼、圖片、影片與音訊的組合轉換至統一嵌入空間,讓應用程式能跨媒體類型尋找語意相關內容,而不僅依賴精確關鍵字。
此模型針對注重隱私的裝置端工作流程而設計,例如本機媒體搜尋、程式碼庫索引、語意檢索與檢索增強生成。其模組化架構、可設定的向量維度與 8K token 上下文視窗,旨在協助開發者將多模態檢索整合至資源受限的本機環境。
將文字、程式碼、圖片、影片與音訊映射至同一共享嵌入空間,支援不同媒體類型之間的語意比較。
採用專為本機推論設計的 7.4 億參數架構;來源回報,在 Google Pixel 11 Pro 上,量化後的純文字權重約需 191 MB,而完整多模態模型約需 567 MB。
支援約 2.7 億參數的純文字設定,並可選用 1.7 億參數的視覺編碼器與 3 億參數的音訊編碼器,以處理多模態工作負載。
提供 8K token 的上下文視窗,可直接在本機硬體上支援最長 5.5 分鐘的音訊、29 張圖片、58 個影片畫格,或交錯組合。
Matryoshka Representation Learning 可將向量從 768 維截短至 512、256 或 128 維;根據來源,這可讓本機向量資料庫與記憶體需求最多降低六倍。
此模型採用 Apache 2.0 授權發布,可搭配 Google AI Edge MediaPipe、LiteRT、transformers.js 與 WebGPU 等瀏覽器工具,以及 Google 列出的多個模型服務框架使用。
在本機嵌入檔案、圖片、錄音與其他個人媒體,接著透過文字或圖片查詢檢索相關項目,而不必將來源內容傳送至遠端服務。
透過輸入文字描述或使用音訊查詢,搜尋長時間錄音或影片集合,以找出語意相關的片段。
為本機儲存庫建立索引,並支援語意程式碼搜尋或程式碼代理檢索。來源回報,在 MTEB Code 上相較第一代 EmbeddingGemma 提升 9.92 分。
使用 EmbeddingGemma 2 進行本機檢索,並搭配 Gemma 4 在多模態裝置端 RAG 管線中進行上下文推理。
在 MediaPipe Decision Task API 工作流程中使用多模態上下文,以進行分類、路由與預測性決策引擎處理。
EmbeddingGemma 2 會將文字、程式碼、圖片、影片與音訊映射至共享嵌入空間,讓應用程式能透過語意相似度比較及檢索不同媒體類型。
此模型可在本機硬體上執行,並針對裝置端推論而設計。Google 回報,在 Google Pixel 11 Pro 上,量化後的純文字權重約需 191 MB 的作用中 RAM,而完整多模態模型約需 567 MB。
開發者可以從 Hugging Face 和 Kaggle 下載模型權重。來源也列出 Google AI Edge MediaPipe、LiteRT、transformers.js、WebGPU、transformers、sentence-transformers、MLX、vLLM、llama.cpp、SGLang、Ollama 和 LMStudio,作為支援的開發或服務工具與環境。
此模型支援可動態縮減的輸出向量,能使用 Matryoshka Representation Learning 將維度從 768 降至 512、256 或 128。來源說明,這可讓本機向量資料庫的儲存空間與記憶體使用量最多降低六倍。
發布文章未提供定價資訊。文章指出,此模型採用商業使用限制寬鬆的 Apache 2.0 授權發布,但使用者應查閱模型卡與相關文件,以了解適用條款與使用細節。
ByteAsk 是專為 C 與 C++ 打造的終端機優先 AI coding agent,先編輯儲存庫再用真實編譯器、除錯器、sanitizer 與測試驗證變更,並提供免費方案與付費方案。
Epherem 是適用於 Lovable、Bolt、v0、Replit、Cursor 與 Claude Code 等 AI 程式設計工具打造網頁應用程式的靜態安全掃描器,檢查原始碼與相依套件中的常見安全錯誤,分類呈現結果並提供修正建議,無須執行應用程式。
CreateOS Sandbox 是以 Firecracker micro-VM 執行程式與 agent 工作負載的隔離運算環境,支援私有網路、SDK、CLI 與 MCP 程式化控制。
GitBot 是以瀏覽器為基礎的本機工作區,可使用 Claude Code、Codex 或 OpenCode 建立可重複使用的程式設計機器人,並在儲存庫資料夾中執行,支援持續執行緒與可設定權限。
hob 是一個獨立的 coding agents 工作區,整合 agent sessions、終端機、歷史紀錄與後續工作,並維持你既有的工具與供應商設定。適合想保有本機路由、歷史與工作區結構控制權的開發者。
Ably Chat 是一個聊天 API 平台,適合打造自訂即時聊天應用程式。支援聊天室訊息、輸入中提示、在線狀態、表情回應與訊息更新,並提供依使用量計費選項。