Презентация Meta: новый ШІ-помічник, моделі Llama 3.2 і інше

Meta представила ряд нововведений в області ШШ на щорічному заході Meta Connect 2024. Серед них нові версії великої мовної моделі Llama 3.2, голосовий ШШ-помічник Meta AI, оновлення смарт-окулярів Ray-Ban та інші розробки

Сімейство великих мовних моделей Llama оновлено до версії 3.2. Нейромережі стали мультимодальними — вони здатні обробляти текст і зображення.

Компактна Llama 3.2 11B та більш розгорнута 90B можуть аналізувати графіки та діаграми, підписувати зображення, визначати об'єкти на зображеннях. Наприклад, маючи графік доходів компанії за рік, моделі можуть швидко виділити найбільш результативні місяці. Проаналізувавши карту парку, ШІ підкаже довжину стежки або зміну рельєфу.

Інші дві версії моделі - Llama 3.2 1B і 3B - є більш стислі. Вони створені для роботи на смартфонах і використовуються для простих завдань, таких як підсумовування та переписування абзаців.

Мета AI-помічник отримав голос. Користувачі можуть задавати питання та отримувати голосові відповіді в Messenger, Facebook, WhatsApp та Instagram

Смарт-окуляри від Ray-Ban і Meta отримали оновлення - обробку відео в реальному часі з застосуванням штучного інтелекту. Завдяки цьому можна задавати питання окулярам щодо того, що вони бачать. Також додані функції нагадування, перекладу та інтеграції з музичними додатками.

Meta AI навчили редагувати фотографії, відповідати на запитання щодо зображень та ділитися ними в чатах. Функціонал став доступний завдяки мультимодальності Llama 3.2

Робота Meta AI з зображеннями. Дані: Meta. Надіславши зображення ШШ-помічнику, його можна попросити внести зміни, наприклад видалити об'єкт або оновити фон.

Редагування зображення за допомогою Meta AI. Дані: Meta.Meta AI доступний в Instagram

На заході були представлені окуляри ORION. Вони мають легку вагу та нейронний інтерфейс для управління, а також можуть відстежувати руки та очі. В них використовуються маленькі проектори, вбудовані в вушка. Продукт позиціонується як продовження розумних окулярів від Ray-Ban і наразі доробляється.

Окуляри Orion. Дані: Meta.Ще один новий гаджет — Meta Quest 3S. Це більш дешева альтернатива Quest 3. Нова гарнітура для змішаної реальності коштує $300, що на $200 дешевше стандартної версії. У базовому виконанні модель постачається з 128 ГБ пам'яті та дисплеєм меншої якості.

Компанія тестує режим перекладача, в якому ШІ бере оригінальний контент, перекладає його на іншу мову і відповідним чином синхронізує губи створювача

Нагадаємо, в липні Meta представила колекцію нових ІШ-систем Llama 3.1, включаючи «довгоочікувану» 405B — «першу модель з відкритим вихідним кодом передового рівня».