Google DeepMind натренирует ИИ на четверти миллиона игроков в Eve Online

EVE

Игровой  "инкубатор " для алгоритмов будущего

Подразделение искусственного интеллекта Google   DeepMind   заключило соглашение с CCP Games, разработчиками легендарной MMORPG Eve Online. Цель: использовать данные 250 000 активных игроков для обучения следующего поколения ИИ агентов. В отличие от предыдущих экспериментов (StarCraft II, Dota 2), где нейросети учились на реплеях турниров, DeepMind впервые получит доступ к живой, непрерывно меняющейся социально экономической системе с реальным человеческим поведением.

Почему именно Eve Online, а не любая другая игра?

Eve Online принципиально отличается от типичных  "боевиков " или стратегий. В ней нет привычного  "загрузись   постреляй   выйди ". Это песочница с полностью пользовательской экономикой, корпоративными войнами, шпионажем, логистикой и дипломатией. Основные особенности:

• Экономика. Рынок в Eve не привязан к NPC торговцам. Цены, дефицит, спекуляции и крахи формируются самими игроками. Один клан может монополизировать производство редкого ресурса.
• Социальная инженерия. Войны между корпорациями длятся годами, исход решают не только сражения, но и шпионаж, предательства, переговоры.
• Реальные ставки. Корабли в Eve имеют реальную ценность в человеко часах или даже долларах (через PLEX   внутриигровую валюту, конвертируемую в подписку).

По словам представителя DeepMind, именно  "человеческий фактор во всей его иррациональности " представляет главную ценность для обучения.

Что конкретно будет делать ИИ?

DeepMind планирует использовать данные Eve Online для решения трех классов задач, которые пока плохо поддаются традиционному обучению с подкреплением:

1. Долгосрочное планирование в условиях неопределенности. Игроки в Eve строят корабли месяцами, планируют вторжения за полгода и управляют цепочками поставок, где сбой на одном этапе обрушивает всю экономику клана.
2. Социальное взаимодействие и кооперация. Как убедить другого игрока не атаковать? Как выявить шпиона в своем альянсе? Как сформировать временный союз против общего врага, зная, что завтра этот союз распадется?
3. Обман и скрытые действия. В отличие от шахмат или го, где все ходы видны, в Eve важна дезинформация, ложные обещания, слив данных и  "двойные агенты ".

DeepMind утверждает, что не создает ботов для самой игры. Модель будет обучаться офлайн, анализируя лайвы с серверов CCP Games. Никакого вмешательства в текущие процессы не планируется.

 "Умный " против  "живого "   главный риск проекта

Разместите
тендер бесплатно

Наша система сама подберет вам исполнителей на услуги, связанные с разработкой сайта или приложения, поисковой оптимизацией, контекстной рекламой, маркетингом, SMM и PR.

Заполнить заявку 13507 тендеров
проведено за восемь лет работы нашего сайта.

Предыдущий эксперимент DeepMind со StarCraft II, где AlphaStar обыграл профессиональных игроков, показал одну проблему: ИИ побеждал за счет сверхчеловеческой скорости реакции и микро менеджмента, но полностью проваливал долгосрочную стратегию и обман. В Eve скорость кликов не имеет значения. Решающую роль играют доверие и репутация.

В сообществе Eve уже обсуждают возможные последствия. Один из игроков на Reddit заметил:  "Представьте ИИ, который выигрывает войну за какой нибудь альянс. А потом его алгоритмы применяют в реальном бизнесе или военном планировании ". Другой возражает:  "Люди слишком непредсказуемы. В 2018 году битва при B R5RB началась из за того, что один игрок забыл заплатить налоги. Как модель это предскажет? "

Глава CCP Games Хильмар Петурссон в интервью назвал сотрудничество с DeepMind  "естественным шагом ", так как Eve изначально проектировалась как эксперимент по изучению человеческого поведения.

А что с этикой и деньгами?

Прозрачность использования игровых данных вызывает вопросы:

• Согласие. Получат ли игроки компенсацию за то, что их стиль игры, переговоры и тактики станут учебной выборкой? DeepMind официально не комментирует этот пункт.
• Применимость. Если алгоритм научится манипулировать людьми в игре, кто помешает использовать те же методы в рекомендательных системах, маркетинге или политических кампаниях?
• Игровой опыт. Даже если DeepMind не внедряет ботов, игроки опасаются, что компания выпустит open source модель, которую энтузиасты адаптируют для автоведения торговых флотов или сбора ресурсов. Это убьет экономику Eve.