Max Home IndustryПоследняя игра, в которой ИИ победил лучшего игрока-человека, — это Dota 2, видеоигра на боевой арене, опубликованная Valve как продолжение Defense of the Ancients. Самообучающийся бот OpenAI неожиданно появился на международном турнире по Dota 2 в Сиэтле в этом году и одержал решающую победу.
В Dota 2, в которую ежемесячно играют более 10 миллионов человек, обычно играют две команды по 5 игроков с целью коллективного уничтожения большого сооружения, защищаемого противоборствующей командой, известного как «Древний», в то же время защищая свою собственную. Каждый из десяти игроков управляет одним из 113 «героев» игры, каждый из которых имеет свои сильные и слабые стороны. Формат 1 на 1 — это тоже сложная игра со скрытой информацией. Агенты должны научиться планировать, атаковать, хитрить и обманывать своих противников.
The International — это ежегодный недельный турнир Valve для профессиональных игроков с призовым фондом более 24 миллионов долларов. OpenAI потребовалось всего две недели, чтобы обучить робота играть с профессиональными игроками Data 2 на мероприятии в этом году, и он не проиграл многих ведущих профессионалов, включая SumaiL, лучшего игрока 1v1 в мире) и лучшего игрока в мире, Arteezy.
В матче, который попал в заголовки газет, три раунда должны были сыграть против любимца публики Данила «Dendi» Ишутина. Бот Open AI обыграл Dendi в первом матче примерно за десять минут. Денди отказался от участия во втором матче, отказался играть в третьем и, как сообщается, сказал:
«Пожалуйста, перестань издеваться надо мной»
Впоследствии он выразил удивление, что бот может переиграть человека, и сказал, что бот:
«Немного похож на человека, но немного на что-то другое».
OpenAI — это некоммерческая организация, основанная Илоном Маском, Сэмом Альтманом, Грегом Брокманом и Ильей Суцкевером в декабре 2015 года с инвестициями в 1 миллиард долларов, см. AI Goes Open Source To The Tune Of 1 миллиард долларов. Он быстро начал реализовывать исследовательские проекты, см. OpenAI Gym дает тренировку с подкреплением, и в прошлом году заключил партнерское соглашение с Microsoft, чтобы использовать Azure.
Хотя Илон Маск открыто заявлял об угрозах, исходящих от ИИ, он обратился в Twitter, чтобы признать достижение OpenAI:
В этом видео, сделанном перед выставочным матчем, Грег Брокман, технический директор Open AI и часть исследовательской группы этого проекта, объясняет, почему бота учили играть в боевую игру:
Цель открытого ИИ — создать безопасный общий искусственный интеллект. Мы знаем, что A I может быть очень полезным для человечества, и для этого потребуются фундаментальные достижения, чтобы увидеть, на что он действительно способен. Dota — отличный полигон для искусственного интеллекта
Ссылаясь на задачу научить робота играть в эту игру с очень сложными правилами, он отмечает, что бот полностью самообучается. Он начался в совершенно случайном состоянии, не зная об игровом мире, и просто играл против своей копии. Это означало, что у него всегда был равный противник.
Обучение через игру само по себе оказалось очень эффективным, поскольку в течение двух недель оно приобрело поведение и стратегии, позволяющие побеждать игроков-людей:
Сам Грег Брокман, похоже, был впечатлен успехом этого метода.
В последующем твите Брокман упоминает, что OpenAI сейчас работает над Dota 5v5 и нанимает.