Waypoint-1: Open-source генератор игровых миров в реальном времени

Стартап Overworld, основанный выходцами из исследовательской команды Stability AI (не из основной команды, а так) , выложил в опенсорс Waypoint-1 — две модели (2.3B и 6.1B) для генерации интерактивных миров по текстовому промпту. Чуваки также привлекли $4.5 млн в pre-seed раунде.

Я попробовал, в целом выглядит как любой другой диффузионный генератор миров, работающий в реальном времени. Прорыва нет, но это опенсорс!

Но главная фича — это производительность: младшая модель способна работать на потребительских GPU, выдавая 30 FPS при генерации в 4 шага и аж 60, если генерить в 2 шага при разрешении 360p.

Кстати, из прикольного: для сбора данных разрабы платят по $5 в час за запись геймплея целого ряда игр через их специальную софтину.

Демо
Демо на Gradio
Блог
Веса

@ai_newz