Як інформує «Перший Новинний» з посиланням на матеріал The-Decoder, компанія Nvidia анонсувала універсальну модель для ШІ-агентів, орієнтованих на ігрові середовища. Інструмент під назвою NitroGen призначений для аналізу дій і прийняття рішень в іграх різних жанрів і архітектур.
В основі NitroGen лежить система обробки дій на базі OpenVision. Модель пройшла навчання на масиві з 40 000 годин відеозаписів ігрового процесу, зібраних більш ніж з 1000 проєктів. Для формування датасету дослідники задіяли раніше недооцінене джерело — записи з YouTube і Twitch, де на екрані відображалися накладення контролерів.
За допомогою методів зіставлення шаблонів і доопрацьованої версії SegFormer фахівці змогли витягти користувацьке введення безпосередньо з відеопотоку. Це дозволило пов’язати візуальні сцени з конкретними діями гравця без прямого доступу до вихідного коду ігор.
NitroGen побудований на базі моделі Nvidia GR00T N1.5. Розробники відзначають, що проєкт став першим підтвердженням того, що базові моделі, створені для робототехніки, здатні функціонувати як універсальні агенти у віртуальних світах з різними фізичними двигунами та візуальними стилями. Система коректно працює в екшен-RPG, платформерах, roguelike-проєктах та інших напрямках.
При запуску в незнайомих іграх NitroGen показує до 52% вищу ймовірність успішного проходження завдань у порівнянні з моделями, навченими з нуля під конкретну гру. Це робить інструмент перспективним для прототипування, тестування механік і автоматизованого аналізу ігрового процесу, у тому числі — проходження.
У розробці взяли участь фахівці Nvidia, Стенфордського університету, Каліфорнійського технологічного інституту та низці інших наукових центрів. Команда відкрила доступ до набору даних, «ваги моделі», дослідницької статті та програмного коду, що дозволяє використовувати розробку в наукових і прикладних проєктах.
Раніше ми писали про те, що користувачі Steam визначилися з топ-10 найбільш очікуваних ігор 2026 року.