Google DeepMind показала Genie 4 — следующее поколение своей «модели мира», которая генерирует интерактивные 3D-сцены, по которым можно перемещаться в реальном времени.
Что нового
- Звук в реальном времени, соответствующий сцене: музыка, фоновые шумы и интерактивные диалоги.
- Управление промптами на лету: прямо во время симуляции можно сменить погоду или ракурс, добавить людей или объекты.
- Более правдоподобная физика и персонажи по сравнению с Genie 3.
- Консистентность сцены — до двух минут, вдвое больше, чем у предшественника.
- Связка с Gemini: Gemini планирует шаги и проверяет кадры, а Genie генерирует картинку. В эксперименте Gemini Robotics модель разбивала задачу на шаги, а Genie 4 симулировала их в реальном времени — так можно прогонять сценарии для роботов до реальных испытаний.
Доступность
- Сейчас — исследовательское превью для «доверенных тестировщиков».
- В ближайшие недели — для подписчиков Google AI Ultra в Project Genie.
- Ранний доступ получат партнёры Gemini API и Google AI Studio; общедоступного API пока нет.
Ограничения
Детали и объекты «плывут» при длинных симуляциях; Google пока не решила проблемы точности звука и читаемого текста внутри мира. Сама команда называет продукт «ранней стадией».
Почему это важно
World models становятся инструментом не только для игр, но и для обучения и тестирования агентов и роботов в симуляции. Для разработчиков интересен будущий доступ через Gemini API — следите за программой раннего доступа.
Google DeepMind has shown Genie 4, the next generation of its world model, which generates interactive 3D scenes you can move through in real time.
What’s new
- Real-time audio that matches the scene: music, ambient sound and interactive dialogue.
- Live prompt steering: mid-simulation you can change the weather or camera angle, or add people and objects.
- More realistic physics and characters than Genie 3.
- Scene consistency for up to two minutes, double its predecessor.
- Pairing with Gemini: Gemini plans steps and checks frames while Genie renders. In a Gemini Robotics experiment, a model broke a task into steps that Genie 4 simulated in real time, a way to test robot scenarios before real-world trials.
Availability
- Now: a research preview for trusted testers.
- In the coming weeks: Google AI Ultra subscribers in Project Genie.
- Early access partners of the Gemini API and Google AI Studio will also get it; there is no general API yet.
Limitations
Details and objects drift in longer simulations, and Google has not yet solved audio accuracy or legible in-world text. The team itself calls it “early days”.
Why it matters
World models are becoming a tool not just for games but for training and testing agents and robots in simulation. For developers, the interesting part is future Gemini API access, so watch the early access program.