مدل چندوجهی EmbeddingGemma 2 گوگل برای اجرای آفلاین روی گوشی معرفی شد

گوگل از EmbeddingGemma 2، مدل چندوجهی و متن‌باز جدیدی با 740 میلیون پارامتر رونمایی کرد که می‌تواند متن، کد، تصویر، ویدیو و صدا را در یک فضای مشترک به بردارهای معنایی تبدیل کند و به‌صورت آفلاین روی گوشی، لپ‌تاپ و دستگاه‌های مختلف اجرا شود. این مدل با مجوز Apache 2.0 منتشر شده و گوگل آن را برای کاربردهایی مانند جست‌وجوی پیشرفته و بازیابی اطلاعات به‌صورت آفلان طراحی کرده است. در این مدل داده‌ها برای پردازش به سرورهای ابری ارسال نمی‌شوند. EmbeddingGemma 2 دارای 740 میلیون پارامتر است که برای پردازش متن به 270 میلیون پارامتر نیاز دارد. همچنین این مدل با تبدیل انواع مختلف محتوا به یک فضای مشترک، امکان جست‌وجوی بین‌وجهی را فراهم می‌کند؛ برای مثال می‌توان با یک پیام صوتی به دنبال بخش خاصی از یک ویدیو گشت یا با یک عبارت متنی میان ساعت‌ها فایل صوتی جست‌وجو کرد. مشخصات مدل چندوجهی آفلاین EmbeddingGemma 2 گوگل گوگل می‌گوید EmbeddingGemma 2 برای اجرا روی دستگاه‌های دارای منابع محدود بهینه شده است. این مدل روی گوشی پیکسل 11 پرو برای پردازش متن به حدود 191 مگابایت رم فعال نیاز دارد. اجرای نسخه کامل چندوجهی نیز حدود 567 مگابایت رم مصرف می‌کند. این مدل بر پایه معماری Gemma 4 ساخته شده و توکنایزر متنی و رمزگذار صوتی مشترکی با آن دارد. به گفته گوگل، همین موضوع باعث می‌شود EmbeddingGemma 2 و Gemma 4 بتوانند در یک خط پردازش مشترک با مصرف حافظه ترکیبی پایین‌تر اجرا شوند. EmbeddingGemma 2 همچنین پنجره زمینه 8192 توکنی دارد که چهار برابر نسخه اول EmbeddingGemma است. این ظرفیت امکان پردازش حداکثر 29 تصویر، 58 فریم ویدیو یا حدود 5.5 دقیقه صدا را فراهم می‌کند و می‌توان این ورودی‌ها را نیز با یکدیگر ترکیب کرد. گوگل اعلام کرده EmbeddingGemma 2 در ارزیابی‌های مربوط به متن، تصویر و صدا برای مدلی با کمتر از یک میلیارد پارامتر عملکرد بالایی دارد و در برخی وظایف با مدل‌های بزرگ‌تر نیز برابری می‌کند یا عملکرد بهتری دارد. این مدل در بخش کد از MTEB Code به امتیاز 78.68 رسیده است، درحالی‌که امتیاز EmbeddingGemma قبلی 68.76 بوده است. گوگل این افزایش 9.92 امتیازی را به‌عنوان بهبود عملکرد مدل در وظایف مرتبط با کد معرفی کرده است. البته EmbeddingGemma 2 با وجود پشتیبانی از بیش از 100 زبان، برای همه زبان‌ها عملکرد یکسانی ندارد و خود گوگل نیز این محدودیت را در مستندات مدل ذکر کرده است. این مدل همچنین فاقد تنظیمات ایمنی (Safety Tuning) و تعدیل خروجی (Output Moderation) است. گوگل می‌گوید اقدامات کاهشی مرتبط با ایمنی در مرحله آموزش داده‌ها اعمال شده‌اند. EmbeddingGemma 2 با مجوز Apache 2.0 عرضه شده و وزن‌های آن از طریق Hugging Face و Kaggle در دسترس قرار گرفته‌اند.