OpenAI в Dota 2: нова сторінка в історії гри

1. Як цей Скайнет навчається і коли він захоче мою куртку?
2. Чому, незважаючи на непереможний рівень Штучного інтелекту, він не вийде за рамки шоу-матчів?
3. Куди це нас приведе?

Після перемоги OpenAI над Dendi в МЗС виникли питання: як працює ІІ, навіщо «лізе до нас в кіберспорт» і що може привнести в змагальну Dota 2.

Батьки подарували вам перший комп'ютер і залишили з ним гратися. Після незграбних потуг ви розібралися в Paint і зрозуміли принцип дії «Сапера», а вже через півроку мама кликала вас, коли «щось натиснула і все кудись зникло».

Штучний інтелект, в деякому роді, такий же дитина: він вчиться на прикладах і власних помилках, але зі швидкістю Джиммі Нейтрона. Нейросеть в його голові кричить: «Думай! Думай! Думай! ».

Як цей Скайнет навчається і коли він захоче мою куртку?

Мій друг вирішив навчити мене грати в «доту». Ми пішли грати з ботами, і вже ігор через 20 мене перестали вбивати вишки. Я вирішила, що доросла до ігор з людьми. Друг же залишився грати з нечесними ботами. Через півроку ми обидва пішли калібрувати рейтинг. Він отримав 4 500, а я - 2 100.

Нечесний бот перевершує середньостатистичного гравця по фарму і за швидкістю реакції. Прораховує шкоди від здібностей і закуповується за заданою збірці: виконує функції, прописані творцем-людиною. Але він не володіє інтелектом і його не можна навчити, на відміну від OpenAI.

Штучний інтелект навчається завдяки нейромережі. Нейросеть - це майже як людський мозок, створений з коду; маленька дитина, яка навчається кожен день.

Якщо ми ставимо систему боротися з опонентом, її мета - перемога над опонентом. Коли опонент вона сама - вона намагається переплюнути не ворога, а себе з минулого бою.

Ще в березні OpenAI не міг дати відсіч гравцеві з 1 500 MMR, а вже в серпні змушував лаятися кращих Мідером планети. «Окей, він розвалив Dendi на SF'ах. Нам-то що? », - думають глядачі після шоу-матчу.

Справа в тому, що Штучний інтелект вже привносив зміни в традиційні настільні ігри: шахи та го. Другу він змінив в корені. Го традиційно вважається складніше шахів. Коли DeepMind обіграв людини в шахах, аналогічні системи в го сяк-так справлялися з місцевими 3 500 MMR-гравцями. Але після перемоги AlphaGo її опонент, триразовий чемпіон Європи, визнав, що завдяки цьому матчу він став грати краще і став бачити ті елементи гри, які не помічав раніше.

Це відбувається тому, що людина думає спершу тактично, а потім - стратегічно. Для ІІ вся гра - безперервний процес. Вона не ділить партію на початкову та пізню гру. Кожен рух робиться з розрахунком на майбутнє.

Dota 2 - не проста MOBA, це розрахована на багато користувачів екшн-RTS, в якій 113 героїв дають нам більш ніж 62 088 500 мільярдів варіантів піків команд. А ще нейтрали, яких можна приручити, вміння, які можна відобразити, вкрасти і перенаправити. Уявити собі всі комбінації просто неможливо. Для людини, але не для ІІ.

Найвідомішу комбінацію ми побачили на The International 2013. Не було абсолютно нічого у всій грі, що врятувало б Natus Vincere від поразки. А потім вони почали Хука на фонтан.

Тепер найцікавішим комбінаціям присвячені канали на YouTube, забавні гифки і пости на Reddit. Але гравці ніколи не зможуть знайти стільки лазівок, скільки зможе ІІ. І це не єдине, в чому він може нам допомогти.

Чому, незважаючи на непереможний рівень Штучного інтелекту, він не вийде за рамки шоу-матчів?

У шахах і го вже давно використовується ІІ, але турніри з його участю не витіснили «живі» змагання. Причина, по якій турніри між ІІ не набули популярності в інших іграх, проста: людина хворіє, в якійсь мірі, не за виконання і техніку, а за іншу людину. Na'Vi підтримував зал на першому TI через харизматичних гравців, а також і тому що вони залишалися не єдиною азіатською командою. за Digital Chaos на The International 2016 ми хворіли не через техніки гри, а, здебільшого, через останньої надії СНД - Романа « Resolut1on »Фомінка.

Цього літа Данило « Dendi »Ішутін програв OpenAI в МЗС, після чого творці пообіцяли повноцінний 5х5 шоу-матч в наступному році. Але далі шоу-матчів сутички ІІ не вийдуть. Звичайно, цікаво разок поглянути, як дві команди покажуть «ідеальну" доту "»: безпомилкову, академічну - це стане відмінним шоу. Але не турніром.

Куди це нас приведе?

Молоді гравці перемагають досвідчених, тому що приходять в гру зі свіжим поглядом. Більшість з них навіть не бачило першу «доту».

ІІ же поводиться як дитина-tabula rasa, з повністю чистою свідомістю. Його не обмежує «епоха класицизму», звичні збірки і «я в мід». Він ідеально знає «доту», нічого не «знаючи» про неї. Нейросеть може взагалі перестати ходити в мід, визнавши його марним. Або ходити на нього вчотирьох і при цьому вигравати.

Ролей, якими ми їх уявляємо, може не бути, якщо мережа скаже, що так оптимальніше. Або вони можуть змінюватися, коли їй заманеться. Faceless Void, залітає з «куполом» в заміс, маже союзників «Фласк» і протискуєте Guardian Greaves. А чому ні? Людина б так не зробив: він знає, що Faceless Void - Фарм. Але немає, все - пішов мазати «Фласк».

Нейросеть дивиться на картину глобальніше, тому що у неї немає поняття про те, що вона робить. Крім емпіричного. Ми їй не даємо термінів «пушіть», «Харас», вона сама винаходить для себе мову «Доти». І, швидше за все, в інших формах буде їх сприймати. Ми цього не зможемо уявити, поки не бачимо ІІ в дії.

Але зможемо використовувати це для змін карти, патчів і спроб досягти ідеального балансу.