Stability AI представляет omnigaia: всемодальный ИИ

Компания Stability AI представляет OmniGAIA – новую модель искусственного интеллекта, способную воспринимать и генерировать контент, используя различные модальности, такие как текст, изображения и аудио. OmniGAIA стремится к созданию «нативных всемодальных агентов ИИ».

Модель построена на архитектуре, позволяющей ей понимать взаимосвязи между различными типами данных. Это позволяет OmniGAIA выполнять сложные задачи, требующие понимания и интеграции информации из разных источников.

OmniGAIA способна к выполнению задач, таких как визуальный вопрос-ответ, генерация изображений на основе текстовых запросов, и преобразование аудио в текст. Модель также демонстрирует способность к созданию музыки, и генерации текстовых описаний к изображениям.

Разработчики Stability AI подчеркивают, что OmniGAIA является открытой моделью, и они планируют дальнейшее развитие и совершенствование ее возможностей. OmniGAIA доступна для использования исследователям и разработчикам.