Oasis AI

Oasis — это виртуальный мир от Decart AI, похожий на Minecraft, но без привычного движка. Игровой мир создают нейросети в реальном времени, реагируя на действия пользователя. Игра доступна на английском языке.

Полезные ссылки:

• Играть в Oasis Minecraft в браузере;‍
• Блог разработчика на английском;‍
• GitHub;‍
• Hugging Face.

Как работает Oasis AI

Искусственный интеллект создает окружение на лету, реагируя на команды. Всё — от ландшафта до предметов — генерируется моделью на базе рансформеров. Пользователю достаточно браузера и стабильного интернета, чтобы попробовать демо-версию.

Что можно делать в Oasis Minecraft

Как и в Minecraft, вы можете строить, копать и исследовать. OASIS генерирует уникальные объекты под действия игрока. Разрешение игры — 720p при 20 кадрах в секунду. Это ниже общепринятых стандартов, но достаточно, чтобы опробовать автоматически создаваемые игровые миры в стиле Майнкрафт.

Как поиграть в Oasis Minecraft

Для запуска игры нужно перейти на официальный сайт и нажать Start. На момент написания обзора пользователям предлагают игровые миры:

• Village Outpost — деревня среди холмов с сельскохозяйственными угодьями;
• Dense Forest — лесная местность с высокими деревьями;
• Rugget Coastline — отвесной берег, переходящий в океан;
• Desert Expance — пустынная местность с дюнами и засушливой природой;
• Mountain Meadow — склон горы с дикими цветами и зеленой местностью.

После выбора игрового мира он генерируется за пару секунд и можно приступать к игре. Для управления используются клавиатура и мышь.

• Движение — WSAD;
• Осмотреться вокруг — повороты мыши;
• Прыжок — пробел;
• Бег — Ctrl;
• Инвентарь — E;
• Использование предметов — 1-9;
• Удар — ПКМ или Q;
• Выбросить или подобрать предмет — ЛКМ;
• Пауза — ESC.

После запуска игры пропадает курсор. Для того, чтобы он появился нужно нажать ESC дважды. Одна игровая сессия длится не больше 15 минут из-за высокой нагрузки на серверы. Доступ к игре может появиться не сразу, иногда нужно подождать очередь. Во время тестирования не приходилось ждать дольше минуты.

После завершения игры пользователи могут скачать видео игрового процесса в формате MP4 и поделиться достижениями.

Звуковое сопровождение можно включить или отключить, нажав на кнопку с динамиком.

Oasis Minecraft не работает

Как уже писалось выше, наиболее распространенная причина — это банальная очередь. Нужно подождать, пока не появится надпись, что очередь подошла, а кнопка станет зеленой.

Так как игровой процесс происходит в браузере любые возникшие проблемы решаются перезагрузкой страницы. Если это не помогает, рекомендуем сменить браузер. Мы тестировали в Opera, Chrome и Safari — проблем не возникало. Дополнительно можно обновить браузер и очистить кэш.

Скачать Оазис Майнкрафт

На момент написания обзора версии для скачивания нет, несмотря на размещенный код в GitHub. Поиграть в Oasis Minecraft AI можно в любом браузере с ПК или ноутбука. Операционная система значения не имеет.

Возможно полноценная версия выйдет в будущем. Рекомендуем следить за обновлениями в официальном блоге Декарт АИ.

Предупреждение

Игра работает не стабильно, бывают баги, в том числе исчезновение предметов. Стоит помнить, что это первый игровой эксперимент с нейросетями таких масштабов, когда мир создается в режиме реального времени. Возможно это и не полноценный, но точно уникальный опыт для любителей Майнкрафт и игр с использованием искусственного интеллекта.

Какие нейросети используются в Oasis Minecraft

В проекте Oasis используются передовые нейросетевые технологии для создания динамичного и интерактивного игрового мира. Он полностью генерируется искусственным интеллектом.

Трансформеры для распознавания изображений — на основе работы Dosovitskiy и др., An Image is Worth 16x16 Words. Они помогают обрабатывать визуальные данные и генерировать объекты мира, используя структурный подход к каждому элементу изображения.

Масштабируемые диффузионные модели — Peebles и др., Scalable Diffusion Models with Transformers, а также исследование Valevski и др., Diffusion Models Are Real-Time Game Engines. Служат в качестве базового “движка” для Oasis. Эти модели генерируют графику в реальном времени, обеспечивая адаптивный и реалистичный мир.

Диффузионные модели для моделирования миров — на основе исследования Alonso и др., Diffusion for World Modeling: Visual Details Matter in Atari. Помогают Oasis улучшать визуальные детали и реалистичность объектов, взаимодействующих с игроком.

Видео-симуляция мира — в основе решение от OpenAI. Oasis применяет видеогенерацию для создания движений и реакции объектов на действия игрока, делая процесс интерактивным.

Предсказание следующего действия с помощью диффузионных моделей — на основе исследования Chen и др., Diffusion Forcing: Next-token Prediction Meets Full-Sequence Diffusion. Помогает предсказывать и адаптировать поведение в мире в зависимости от действий игрока.

Видео-генерация нового уровня — с использованием модели Genmo Mochi 1, которая позволяет создавать плавные и естественные переходы в игровом процессе Oasis.

Новое поколение видео-генерации — на основе Runway Gen-3 Alpha, для создания более качественных кадров, которые поддерживают общую атмосферу и стиль игры.

Обучение на основе видео-примеров — Learning to Act by Watching Unlabeled Online Videos. Позволяет модели обучаться взаимодействию с миром на примере наблюдений, перенимая действия и реакции для более естественного игрового опыта.

Игра обучалась на видео игрового процесса популярной игры Майнкрафт.