AI Qazaqstan
Исследования

Материал түпнұсқа тілінде: English.

EmbeddingGemma 2: an open, lightweight multimodal embedding model

2026 ж. 7 қазан · Дереккөз: Google DeepMind Blog

EmbeddingGemma 2 is the most capable model for on-device multimodal embeddings, natively mapping combinations of text, images, audio, and video into a unified embedding space. Research Engineer, Google DeepMind Research Engineer, Google DeepMind Your browser does not support the audio element. This content is generated by Google AI. Generative AI is experimental We introduced EmbeddingGemma last year to provide a lightweight option for high-quality text embeddings, to help your apps organize, search, and connect information directly on consumer hardware. The developer community’s response blew past our expectations. With more than 20 million downloads, builders have used it to power smarter on-device search tools and privacy-first retrieval augmented generation (RAG) pipelines. Today, we’re launching EmbeddingGemma 2, expanding beyond text to unify code, images, video, and audio in a shared embedding space. Built on the Gemma 4 architecture and released under a commercially permissive Apache 2.0 license, EmbeddingGemma 2 has 740 million parameters, making it optimal for on-device inference. It can help find a specific video clip from a voice memo, or search through hours of audio recordings based on a text query, all processed by a single, natively multimodal model. Built from the same technology as Gemini Embedding models, EmbeddingGemma 2 is: Best-in-class for its size: Achieves leading scores among sub-1B multimodal embedders for its size across benchmarks like MTEB (Massive Text Embedding Benchmark) Code and MAEB (Massive Audio Embedding Benchmark), while matching or outperforming many larger models across text, vision, and audio tasks. Modular by design: Requires as little as 270M parameters for text-only workloads with optional vision (170M) and audio (300M) encoders for full multimodal support. Storage-efficient: Using Matryoshka Representation Learning (MRL), developers can dynamically truncate output vectors from 768 dimensions down to 512, 256, or 128 dimensions. This provides up to 6x storage reduction for local vector databases and memory usage. Optimized for on-device performance: Runs efficiently within tight resource constraints. With quantization, on a Google Pixel 11 Pro, EmbeddingGemma 2 requires as little as ~191MB active RAM for text-only weights and ~567MB for the full multimodal model. Extended context ready: Features an 8K token context window (4x larger than EmbeddingGemma 1), allowing it to process up to 5.5 minutes of audio, 29 images, 58 video frames, or interleaved combinations thereof directly on local hardware. EmbeddingGemma 2 matches the strong multilingual text performance of EmbeddingGemma while delivering a significant 9.92-point improvement on code performance (in MTEB Code, from 68.76 to 78.68), making it well-suited for local codebase indexing, semantic code search, and coding agent retrieval. Across image, video, documents, and audio, it sets a new standard in quality-per-parameter for sub-1B models and even outperforms some specialist models more than twice its size. Find full evaluation metrics and model information in the EmbeddingGemma 2 model card. EmbeddingGemma 2 brings robust capabilities directly to edge hardware. Generating embeddings locally helps ensure data privacy, reduces pipeline latency, and empowers developers to build cross-modal search and retrieval that works entirely offline. When paired with generative models such as Gemma 4, EmbeddingGemma 2 enables on-device RAG pipelines that understand complex multimodal data. Because EmbeddingGemma 2 is built on Gemma 4 and shares its text tokenizer and audio encoder, developers can run both models together in a unified pipeline with a lower combined total memory footprint. To learn how to build on-device search and RAG systems with LiteRT, read the Google AI Edge blog post. We worked closely with the following partners to ensure EmbeddingGemma 2 works immediately where you build: Download the models: Find the model weights on Hugging Face and Kaggle, with Gemini Enterprise Agent Platform Model Garden availability coming soon. Visit LiteRT Community on Hugging Face for models optimized for on-device. On-device deployment: Develop cross-platform apps with Google AI Edge MediaPipe for turnkey embedding, retrieval & decision tasks or LiteRT for custom model integration. Build for the browser with transformers.js or WebGPU. Use your favorite development tools: Serve the model efficiently using transformers, sentence-transformers, MLX, vLLM, llama.cpp, SGLang, Ollama, and LMStudio. Store your embedding vectors with Qdrant. Fine-tuning: Follow guidance by Unsloth for how to fine-tune EmbeddingGemma 2 for your use cases. Explore our developer guide, documentation, and guides for inference and fine-tuning.

Дереккөзде оқу →

Осы тақырыптан тағы

ИсследованияДәл сол фактілер, құқықтық қорғаудың әртүрлі құралдары: тілдік бейімдеу және arbitrariness, LLM және жүйелік шешімдерarXiv: 2611.08995v1 Түріндегі хабарлама: жаңа түйіндеме: ірі тілдік модельдер тұтынушылардың шағымдарын реттеу үшін жиі қолданылады және шағымдардың жазылу сипаты жасына, біліміне және әлеуметтік-экономикалық мәртебесіне (SES) байланысты түрленеді. Біз әрбір фактіні: бірыңғай жапсырманы (GPT-4o-mini және GPT-5-mini) қайтаратын екі МПМ және «Бір жүйесінің» ықтимал моделін сақтап қалуға ұйғарылатын АҚШ тұтынушыларының қаржылық шағымдарының әлеуметтік-лингвистикалық хат алмасуларын пайдалана отырып, шешімдер қабылдаудың үш жүйесін тексереміз, ол қайтарады. DistriarXiv cs.CY (Computers and Society)
ИсследованияІА Жұмыс орындарын орналастыру кезіндегі әсер ету және өзгеретін міндеттерarXiv: 2611.09870v1 Түрлі хабарлама: жаңа резюме: Жұмыс орнында жасанды интеллектіні (АИ) неғұрлым кеңінен енгізу жұмыс берушілердің әртүрлі еңбек қызмет түрлеріне деген сұранысы қалай өзгеретіні туралы мәселені көтереді. Біз Copilot және Claude пайдаланудан туындайтын қызмет деңгейінде жасанды интеллекттің әсер ету көрсеткіштеріне байланысты онлайн режимінде жұмыс орындарын орналастырумен байланысты еңбек қызметінің ауқымы мен мазмұны қалайша өзгеретіні туралы мәселені зерттейміз. Жүйелі түрде салыстыру жүргізу үшін біз жобамен жұмыс істеп жатырмыз, оның аясында жұмысқа байланысты бізге жүктелген міндеттерді баяндайтын едік.arXiv cs.CY (Computers and Society)
ИсследованияКөруді білмедім: Әлеуметтік БАҚ-та жастармен әңгімелесу салдарынан LLM негізіндегі психикалық денсаулықтың эпистемикалық шектеріarXiv: 2611.08565v1 Хабарлама: айқас резюме: Жасөспірімдер жеке әңгімелесу, тәжірибе алмасу және қолдау іздеу үшін әлеуметтік желілерді жиі пайдаланады. Мұндай өзара әрекеттестік цифрлық іздерді тудырады, бұл психикалық және психоәлеуметтік жағдайлардың пайда болуына алып келеді. Ірі тілдік модельдер әңгімелесу және тұлғааралық динамика туралы пайымдауға қабілетті бола бастаған сайын, үлгілер, шын мәнінде, адамның f психологиялық тәжірибесі туралы «танымтал» болуы мүмкін деген іргелі сұрақ қала береді.arXiv cs.CY (Computers and Society)
ИсследованияAI генерациясы дәуіріндегі жаңа доменге кіру: Solo Game Development автоэтнографиясы биоинформатика ретіндеarXiv: 261.01.09623v1 Түрлі хабарлама: айқас резюме: Регенеративті жасанды интеллектіні жылдам жетілдіру (GenAI) практиканың тиімділігін арттырып қана қоймай, жаңа салаларды зерттеуге қабілетті жеке тұлғалардың мүмкіндіктерін кеңейтті. Сонымен қатар, мұндай құқықтар мен мүмкіндіктерді кеңейту нәтижесінде өзіндік ерекшелікті қалыптастыру процесі әлі де жеткілікті зерттелмеген. Біз биоинформатикалық тәрбиеші ретінде жеке ойындарды дамыту контекстінде тұлғаның қалыптасуын түсіну үшін автоэтнографияны пайдаланамыз. Құру-шығару ойынын (CYOA) әзірлеу мақсатында біз carXiv cs.CY (Computers and Society)