Покерные боты.

 

Но сегодня,  интересы исследователей сменились в сторону игр, наподобие покера, так как шахматы не способны вызывать былой энтузиазм, а также благодаря быстрому развитию в области новейших технологий с большими возможностями в областях ведения переговоров и торговли.  Доктор Джонатан Шеффер, проводящий исследования в различных покерных областях, утверждает, что полученные достижения в сферах программного обеспечения покера могут иметь наиболее важные значения, чем, например, программы по шахматам. 

 

В 2007 году такой покерный бот как Polaris проводил розыгрыш против пары профессиональных игроков в рамках ежегодной конференции Ассоциаций по развитию искусственных интеллектов, играя в лимитный покер «Heads-up». Данная игра предназначена для пары игроков, в игре сдается по паре карт рубашками вверх для каждого игрока и по пять общих карт для всех, рубашками вниз. По условиям игры проводилось четыре сессии (две сессии в течении дня) в лимитный техасский холдем (10/20 долларов), по пятьсот рук в каждом розыгрыше. В результате каждого из поединков конечный счет определялся суммой итогов обоих участников игры. Одной из сторон присуждалась победа по итогам двойного матча, при условии, что был получен выигрыш размером не менее 250 долларов. 

 

Состязания были созданы таким образом, что можно было играть за компьютером. Для того, чтобы исключить воздействие удачи, карты, которые были розданы в одной комнате, были аналогичны картам, полученным покерным ботом в другой комнате, таким образом, если Лаку роздали пару пятерок, а Polaris пару двоек, то у Эслами ткже будет пара двоек, а у Polaris пара пятерок. Подобная система позволяет учесть фактор везучести, так как там, где везет одному, другому может наоборот не везти. По мнению основателей программы Polaris, подобная система имеет большое статистическое значение. Конечно, игроки не имели возможности обмениваться информацией, так как живые игроки располагались в разных комнатах, также как и  покерные боты располагались отдельно друг от друга. Также был исключен один из важнейших покерных аспектов, при котором один участник имеет возможность просто угадать карты собственного оппонента по покер телсам (подсказкам тела в покере). 

 

 

Покеристы Эслами и Лаак являются известнейшими игроками, имеют специальное математическое образование и знакомы с методиками, которые используют их противники. Конечно, они не мировые чемпионы, но ученые понимают, что знания в области вычислительной технике делает их довольно серьезными соперниками в сравнении с другими покерными игроками высокого класса.

 

К концу первого раунда команда, состоящая из людей, получила ничью, несмотря на то, что их суммарный выигрыш был немного меньше, чем у покерного бота, люди отдали компьютеру только семьдесят долларов из пятисот раздач, однако, по установленным правилам, несущественные различия не были учтены, учитывая статистические поправки. Второй этап, разыгранный в понедельник, завершился достаточно убедительной победой бота Polaris и участники-люди были полностью деморализованы. Но в третьем раунде люди взяли реванш, в котором Лаак взял большую сумму, чем отдал Эслами (суммарный результат равнялся прибыли в 820 долларов), таким образом живые покерные участники отмечали свою первую победу, используя стратегические изменения покерного бота Polaris, которая использовала программу с увеличением уровня адаптации и «обучаемости».  

 

 

В перерывах Эслами докладывал присутствующим о том, про что он беседовал с Филом. Он рассказал, что игроки многому могут научиться  у компьютерной программы. Для примера, Али довольно часто проводил розыгрыш рук, подобной тройке-четверке или пятерки-четверки, стараясь представлять себе, что имеет мощные руки, однако, по истечению определенного периода времени он согласился с Лааком, что проведение игры против покерного бота была отрицательной. Он поведал о том, что они заметили, что покерный бет проявляет слабость при игре в покер с комбинацией карт, такой как король и небольшая карта. Покерный бот старался проводить розыгрыш подобных карт намного чаще и с большей агрессией,  по сравнению с живым игроком. Перенастройка стратегии полностью сработала. К завершению сессии Али находился в плюсе на 460 долларов, а Фил Лаак забрал 110 долларов, но этого было достаточно для совместной победы. Таким образом люди могут гордится победой над роботами.    

 

Очень любопытны подробности этого напряженного розыгрыша. Polaris покерный бот был создан коллективом канадских исследователей, он в действительности имеет более десятка покерных ботов, каждый из которых по отдельности имеет уникальные тактические особенности, которые выработались на протяжении обучения перед турниром. До каждой сессии создатели покерного бота выбирали, какого именно подопечного кинуть в бой. В первой ничейной сессии, «живым» игрокам противостоял наиболее «осторожный» вариант данной программы, а во второй сессии профессиональных игроков обыгрывал агрессивный бот-игрок, сумевший вывести свою команду вперед. Потом испытатели решили дать покерному боту шанс самому выбрать необходимого игрока в зависимости от противников, однако, данный ход привел к проигрышу  компьютерной программы.  В завершающей сессии Фил и Али снова соединились с довольно аккуратным программным игроком и в результате второй попытки сумели его переиграть. 

 

По сравнению с шахматными программами, требующими огромной вычислительной мощности для того, чтобы подсчитать возможные ходы, покерный бот делает основную часть работы еще до начала игры, на протяжении недель делая серии агентов, ботов, которым были свойственны различные игровые стили: начиная от агрессивного до более пассивного. До матча команда Альберта подготовила десяток покерных ботов, а потом выбрала одну единственную программу, по которой проводились два начальных раунда. Дойдя до третьего раунда, исследователи приняли решение использовать довольно мощную комбинацию, в которой тренерская программа могла контролировать результаты всех трех ботов, а потом заменила их, как будто футбольных игроков на поле.  

 

В результате проведенных сессий, покерные боты по своей результативности почти сравнились с настоящими участниками, а разработчики собираются в ближайшее время улучшить алгоритм и постараться провести матч-реванш. Однако покерная разновидность, которая была выбрана для игры,  отличается ограничениями максимальных размеров ставки, которые значительно упрощают, по мнению разработчиков,  задачу специалистов.