Google начала развёртывание Genie 4 в Project Genie для подходящих подписчиков Google AI Ultra. Модель предназначена для создания интерактивных миров и впервые в Project Genie объединяет генерацию визуальной среды с нативным аудио, которое меняется в реальном времени по мере развития сцены.
Genie 4 работает непосредственно во время сессии: пользователь может вводить текстовые команды и менять уже созданный мир. Промпты позволяют изменить погоду, добавить персонажа или перенаправить действие, не начиная генерацию заново. Аудио адаптируется к происходящему и включает окружающие звуки и диалоги персонажей.
Одновременно Google обновила Genie 3, который остаётся доступен в селекторе моделей Project Genie для сценариев с более длинными сессиями и пространствами, созданными на основе панорам. Максимальная продолжительность одной генерации выросла с 60 секунд до трёх минут. Несколько миров также можно связать в последовательное путешествие.
Genie 3 получил поддержку привязки новых миров к изображениям 360-градусных панорам. В качестве основы можно использовать панорамные изображения, сохраняя окружение при осмотре пространства. Модель также поддерживает события, которые запускаются текстовыми командами непосредственно во время исследования мира.
Для создания более сложных сцен Google добавила Project Genie agent. Пользователь описывает задумку на естественном языке, после чего агент задействует мультимодальные модели Google для подготовки исходных визуальных материалов и фоновой музыки, соответствующей настроению. Во время исследования в сессию можно подключить Gemini: модель анализирует происходящее на экране, предлагает варианты дальнейших действий и может автоматически запускать события внутри мира.
В Project Genie появилась общественная галерея, где можно публиковать созданные миры для дальнейшего изучения и ремикса. Среди примеров Google называет преобразование личных фотографий в исследуемые пространства, доисторические среды на основе 360-градусных панорам и интерактивные сцены с объектами на столе, где Gemini выступает в роли ведущего.
Новый опыт Project Genie доступен подходящим подписчикам Google AI Ultra. Пользователи Google AI Pro могут присоединиться к листу ожидания. Созданные миры можно публиковать в галерее, исследовать работы сообщества и создавать собственные версии.
Поработать с популярными языковыми моделями без VPN и подписок можно в ИИ-студии Нейро.PRO.
Таким образом, обновление Project Genie объединяет Genie 4 для визуальной генерации с интерактивным редактированием, нативным аудио и агентом для создания миров через диалог. Genie 3 при этом сохраняет отдельную роль для продолжительных сессий, панорамной привязки и связанных последовательностей миров.






Комментарии и обсуждение
Пока нет комментариев. Будьте первым!