What Is Gemini Embedding 2 — Google’s First Multimodal AI Model That Maps Text, Images, Video, Audio Together?

від

у

Що таке Gemini Embedding 2 — перша мультимодальна модель штучного інтелекту Google, яка одночасно відображає текст, зображення, відео та аудіо?

Google запустила Gemini Embedding 2, її першу повністю мультимодальну модель вставлення (embedding), базовану на системі Gemini. Ця модель перевершує старі версії, що обробляють лише текст. Вона розміщує текст, зображення, відео, аудіо та документи в одному спільному просторі вставлення. За словами Google, вона працює більш ніж у 100 мовах і розуміє значення ідей незалежно від того, як вони подані — письмово, усно чи візуально.

Як Gemini Embedding 2 від Google відрізняється?

Традиційні однотипні моделі ШІ обробляють лише один тип даних за раз, і більшість моделей зберігають різні типи даних у окремих «просторах». Наприклад, вони трактують слово «торт» у текстовому файлі та торт, показаний у відео, як несхожі елементи. Мультимодальний ШІ, як Gemini Embedding 2, працює з кількома типами даних разом у єдиному запиті, наприклад зображенням, текстом, відео тощо.

Embedding 2 також розміщує їх у «єдиному, об’єднаному просторі вставлення», що спрощує складні конвеєри обробки та полегшує роботі ШІ з різними форматами. Для користувачів це означає, що ШІ може обробляти більше одного входу (наприклад, зображення та текст) у одному запиті замість використання однакових або подібних підказок для різних модальностей введення. Також вона краще пов’язує різні форми даних та точніше розуміє реальний світ.

Можливості Google Gemini Embedding 2

За даними Google, Gemini Embedding 2 може обробляти текст із великим контекстом до 8192 токенів (це малі одиниці даних, які ШІ-моделі використовують для обробки, розуміння та генерації мови). Для зображень вона може обробляти до шести за запит у форматах PNG або JPEG.

Модель ШІ підтримує відео тривалістю до 120 секунд у файлах MP4 або MOV. Вона працює безпосередньо з аудіо, не потребуючи попереднього транскрибування у текст, та також може вбудовувати PDF-документи до шести сторінок у довжину.

March 11, 2026 at 08:14AM