Sony проводит тестирование персонажей PlayStation на базе ИИ, включая прототип Aloy

Sony провела тестирование персонажей PlayStation на базе искусственного интеллекта, включая Aloy, что вызвало дебаты о роли ИИ в играх после утечки видео.

The Verge впервые сообщил о видео, в котором была продемонстрирована экспериментальная AI-версия Алои, отвечающая на голосовые подсказки с помощью AI-генерированной речи и фациальных анимаций. Вскоре после публикации видео было удалено с YouTube по требованию компании Muso, связанной с Sony Interactive Entertainment.

Видеоролик, диктором которого выступает директор по программному обеспечению Sony Шарвин Рагхубардаял, демонстрирует, как AI-управляемый Aloy может вступать в разговоры.

Он использует Whisper от OpenAI для преобразования речи в текст, GPT-4 и Llama 3 для диалога, Эмоциональный Синтезатор Голоса (EVS) Sony для речи, и технологию компании Mockingbird для анимации лица. «Это лишь малая часть того, что возможно», — говорит Рагхубардаял в видео, как сообщает The Verge.

Sony разработала прототип в сотрудничестве с разработчиком Horizon, компанией Guerrilla Games. Хотя демо в основном тестировалось на ПК, Sony, по сообщениям, экспериментировала с его запуском на PS5 с минимальными потерями в производительности, сообщает The Verge.

Технология была впервые продемонстрирована внутри компании год назад, более совершенная версия была представлена за закрытыми дверями на ярмарке Sony Technology Exchange Fair (STEF) в Токио в прошлом ноябре, как сообщает The Verge. Утечка видеоматериалов вызвала опасения в игровой индустрии, особенно среди актеров озвучивания и разработчиков.

IGN сообщает о том, что голос Алои, сгенерированный искусственным интеллектом, не принадлежит Эшли Бёрч, изначальной актрисе этого персонажа, что вызывает дискуссии о роли AI в разработке игр. Некоторые зрители также отметили, что речь AI Алои звучит роботизированно, с жесткими движениями лица и безжизненными глазами.

Широкая игровая индустрия исследует похожие применения AI. Nvidia разрабатывает персонажей, неподконтрольных игроку (NPC), управляемых AI, в рамках своей программы “ACE”, позволяя игрокам общаться в реальном времени с персонажами в игре.

Искусственный интеллект, обеспечивающий работу NPC, может преобразить повествование в открытом мире, сделав взаимодействия более динамичными и погружающими. Сторонники утверждают, что AI может персонализировать задания в зависимости от выбора игрока, создавая более значимые переживания, как сообщает Medium.

NPC могут помнить прошлые встречи, соответственно изменяя свой диалог. Персонажи, управляемые AI, также могут адаптировать свой тон и ответы, чтобы соответствовать эмоциональным ситуациям, делая разговоры более реалистичными.

Кроме того, ИИ может в реальном времени корректировать уровни сложности и поведение врагов для обеспечения сбалансированного игрового опыта.

Тем временем, Microsoft объединяет усилия с Inworld AI для внедрения генеративных AI функций для разработчиков Xbox, как отмечает The Verge.

Кроме того, NEO NPC от Ubisoft, запущенный в марте 2024 года совместно с Nvidia и Inworld AI, позволяет проводить взаимодействие с NPC в реальном времени. Работающий на базе Audio2Face от Nvidia и языковой модели от Inworld, AI синхронизирует анимацию лица с речью, генерируя ответы, учитывающие контекст.

Вопрос о роли ИИ в разработке игр вызывает много споров. Недавний опрос, проведенный на конференции разработчиков игр (GDC) показал, что почти половина респондентов использует генеративный ИИ на своих рабочих местах, но сохраняются опасения относительно его влияния на рабочие места и творчество. Критики утверждают, что ИИ в играх может ослабить сюжетное повествование, заменяя созданные человеком нарративы.

Medium сообщает, что среди проблем затрагиваются такие вопросы, как роботизированный диалог, потеря эмоциональной глубины, а также угроза утраты рабочих мест для писателей и актеров озвучивания. Несмотря на то, что AI может имитировать определенные шаблоны, ему не хватает истинной креативности, что вызывает опасения о том, что игры могут потерять ту тонкость и подлинность, которые человеческие сказочники вносят.

IGN отмечает, что такие компании, как EA и Capcom, вплотную занимаются использованием AI для создания контента, в то время как другие, например, Keywords Studios, признают текущие ограничения AI, отмечая, что он не смог заменить человеческую креативность в разработке игр.

Sony еще не объявила о планах по интеграции персонажей, управляемых AI, в игры для PlayStation. Время утечки информации — незадолго до GDC 2024 — гарантирует, что AI в играх останется ключевой темой для обсуждения.