Google привёз ИИ-кино на Венецианский фестиваль: 2D-видео становится объёмным без пересъёмки

Команда Google 100 ZEROS, которая помогает режиссёрам осваивать новые технологии, поддержала три работы для 83-го Венецианского международного кинофестиваля. Все проекты используют Gemini (мультимодальная модель Google, умеющая работать с текстом, изображением и звуком одновременно) и Vertex AI (облачная платформа Google для запуска ИИ-моделей). Источник: блог Google Italy.

Какие проекты показали?

• NEVATARS Анимационная короткометражка в смешанной реальности от Энди Сёркиса (Andy Serkis). Зритель ведёт разговоры с персонажами, которые отвечают через Gemini, и проходит интерактивные сцены. Сюжет построен вокруг поиска собственного творческого голоса.

• Galápagos: The Last Eden Иммерсивное путешествие по Галапагосским островам с закадровым голосом Марго Робби (Margot Robbie). Зритель взаимодействует с цифровым Чарльзом Дарвином, который работает на Gemini и отвечает на вопросы в реальном времени.

• Sedona Тизер психологического триллера от студии Asylm Studios. Использует технологию Google auto-spatialization, которая автоматически превращает обычное плоское 2D-видео в объёмное 3D XR-пространство. Тизер доступен на YouTube.

Почему auto-spatialization меняет экономику производства?

Технология auto-spatialization (автоматическое превращение плоского видео в объёмное) снимает самый дорогой барьер XR-кино: пересъёмку на специальные камеры. В проекте Sedona обычный 2D-ролик стал трёхмерным без дополнительных съёмок. Для небольших студий это означает, что вход в XR-контент больше не требует отдельного бюджета на стереосъёмку.

Как попробовать?

1. Перейдите в блог Google Italy, где опубликованы подробности о каждом проекте.
2. Тизер Sedona уже доступен на YouTube: ищите по названию «Sedona Asylm Studios».
3. Для полного опыта NEVATARS и Galápagos потребуется устройство на Android XR. Конкретные модели совместимых устройств Google пока не назвала.

Что с этого вам, по ролям?

Авторам Дзена и копирайтерам. Проект NEVATARS показывает, как ИИ-диалог встраивается прямо в нарратив: персонаж «слышит» зрителя и меняет реплики. Это рабочая модель интерактивного сторителлинга. Если вы пишете сценарии или обучающие курсы, изучите, как Gemini обрабатывает разговорные промпты внутри художественной истории.

Маркетологам. Auto-spatialization позволяет превратить уже отснятый рекламный ролик в XR-формат без пересъёмки. Пока технология работает через инструменты Google, но сам принцип «2D в 3D без камеры» появится и в других сервисах.

Разработчикам XR-контента в России. Vertex AI доступен через Google Cloud, Gemini API открыт для разработчиков. В РФ прямой доступ к Google Cloud ограничен, но через партнёрские аккаунты или VPN работать технически возможно. Из российских аналогов для генеративных диалогов можно рассмотреть YandexGPT или GigaChat, хотя ни один из них пока не предлагает встроенного инструмента автоматической пространственной конвертации видео.

Частые вопросы

Можно ли посмотреть эти проекты онлайн прямо сейчас?

Тизер Sedona доступен на YouTube. Полный опыт NEVATARS и Galápagos требует устройства на Android XR. Google не уточнила, появятся ли адаптированные версии для обычных экранов.

Чем XR-кино отличается от обычного VR-видео?

XR (расширенная реальность, Extended Reality) объединяет виртуальную и дополненную реальность. Зритель видит и реальное окружение, и цифровые объекты одновременно, а ещё может вести диалог с персонажами через ИИ. В обычном VR-видео вы только наблюдаете заранее отснятую сцену.

Работает ли auto-spatialization с любым видео?

Google описывает технологию как конвертацию «2D в 3D XR», но не уточняет ограничений по длительности, разрешению или жанру. Пока единственный публичный пример: тизер Sedona на YouTube.

Венецианская премьера показала конкретный набор инструментов: Gemini для диалога с персонажами, Vertex AI для обработки, auto-spatialization для конвертации плоского видео в объёмное. Всё это уже существует как API, а не как концепт. Тем, кто делает видеоконтент, стоит хотя бы один раз запустить тестовый диалог через Gemini API и оценить, как модель держит нарратив внутри художественного сценария.