Стартап Overworld, основанный профессионалами из Stability AI, выпустил open source модель Waypoint-1, способную генерировать интерактивные 3D-окружения в процессе игры. В отличие от традиционных процедурных генераторов, данная система реагирует на действия игрока с клавиатуры и мыши в реальном времени, позволяя пользователю свободно передвигаться по миру, который «достраивается» на лету.
Модель Waypoint-1 основана на видео-диффузионном трансформере с 2,3 миллиарда параметров и обучалась на 10 тысячах часов игровых записей, что позволило ей освоить как визуальные паттерны, так и основную игровую логику. Для обеспечения стабильности мира при длительных сессиях разработчики применили уникальный метод стабилизации, известный как self-forcing via DMD, который минимизирует распад сцены и резкие визуальные скачки.
Согласно разработчикам, на видеокартах уровня RTX 5090 модель способна поддерживать 30 кадров в секунду, что открывает новые возможности для использования технологии в играх, VR-средах и симуляторах. Waypoint-1 уже доступна для скачивания на Hugging Face. Хотя на данный момент это в первую очередь инструмент для исследователей, само появление модели в реальном времени указывает на важные изменения в направлении генерации контента, от статических ассетов к динамическим средам, адаптирующимся под действия пользователя.