Компания Sony представила искусственный интеллект GT Sophy, способный победить лучших в мире игроков в гоночный симулятор Gran Turismo.
Hi there 👋 we'd like to share our latest step in innovation with you…
Meet @TheGranTurismo Sophy, a superhuman racing AI agent developed in collaboration across Sony to specifically to deliver a breakthrough gaming experience: https://t.co/gai90dxvZv pic.twitter.com/827g4P45BT
— Sony (@Sony) February 9, 2022
По словам создателей, ИИ превосходит алгоритмы, разработанные для игр в шахматы и го, а также программы AlphaStar и OpenAI Five, предназначенные для игр StarCraft II и DOTA 2 соответственно.
Исследователи научили игрового GT Sophy управлять цифровым автомобилем, учитывать физику и возможности машины. Также алгоритм освоил гоночные тактики, вроде скользящего движения, обгона и блокирования, используя негласный этикет на треке.
Для создания GT Sophy инженеры использовали глубокое обучение с подкреплением. Алгоритм поместили в окружающую среду, где он за несколько часов самостоятельно выучил правила игры, а спустя «день или два» смог ездить быстрее, чем 95% водителей в наборе для обучения.
Разработчики также продумали систему вознаграждений. Например, они тонко настроили штрафные баллы для ИИ за столкновения с другими автомобилями. Это позволило сформировать агрессивный стиль вождения агента, не запугивая других гонщиков.
Обучение алгоритма производилось на облачной платформе DART, созданной Sony AI. Для этого специалисты лаборатории использовали более тысячи консолей PlayStation 4.
В результате ИИ-агент сумел победить некоторых лучших игроков в Gran Turismo Sport. В июле 2021 года алгоритм уступил гонщику Такуме Миязоно, а также другим трем ведущим игрокам. Спустя три месяца в повторном соревновании ИИ победил людей.
В командном заезде алгоритм превзошел игроков по очкам в два раза.
По словам генерального директора Sony AI Хироаки Китано, GT Sophy является важным достижением в области искусственного интеллекта.
«Помимо вклада в игровое сообщество, мы считаем, что этот прорыв открывает новые возможности в таких областях, как автономные гонки, автономное вождение, высокоскоростная робототехника и управление», — сказал он.
Разработчики планируют добавить алгоритм в другие игры серии Gran Turismo. Возможно, игроки смогут получить Sophy в качестве тренера по вождению или напарника в гонке.
GT Sophy — результат сотрудничества игрового подразделения Sony Interactive Entertainment (SIE), разработчика Gran Turismo Polyphony Digital (PDI) и инновационной лаборатории Sony AI.
Напомним, в апреле 2021 года Sony запатентовала ИИ, который играет в видеоигры вместо пользователя.
В июле года разработчики FIFA 22 сообщили о применении машинного обучения для создания реалистичных анимаций футболистов.
В том же месяце ИИ-энтузиаст с помощью нейросетей скопировал рабочий фрагмент GTA V.
Источник: Источник
