Развитие искусственного интеллекта в покере за 20 лет

Интересное о покере
276 
0
4.8
Развитие искусственного интеллекта в покере за 20 лет
  1. Почему покерный ИИ любопытен далеко за пределами покера
  2. Практический пример применения покерного ИИ
  3. История развития покерного ИИ
  4. 1984 год – Майк Каро представляет зародыш покерного ИИ
    1. 1984 год – Майк Каро представляет зародыш покерного ИИ
  5. 1991 год – начало работы над покерным ИИ
    1. 1991 год – начало работы над покерным ИИ
  6. 1997 год – проигрыш Гарри Каспарова шахматному ИИ и появление покерного бота Локи
    1. 1997 год – проигрыш Гарри Каспарова шахматному ИИ и появление покерного бота Локи
  7. 1999 год – Локи “мутирует” в Поки, появляется первая покерная видеоигра
    1. 1999 год – Локи “мутирует” в Поки, появляется первая покерная видеоигра
  8. 2002-2004 годы – сосредоточение на хэдз-апах и уход от модели шахматного бота
    1. 2002-2004 годы – сосредоточение на хэдз-апах и уход от модели шахматного бота
  9. 2005 год – новая команда разработчиков покерного ИИ
    1. 2005 год – новая команда разработчиков покерного ИИ
  10. 2006 год – соревнование ботов от разных разработчиков
    1. 2006 год – соревнование ботов от разных разработчиков
  11. 2007 год – Фил Лаак играет матч против покерного бота
    1. 2007 год – Фил Лаак играет матч против покерного бота
  12. 2009 год – еще одна команда разработчиков покерного ИИ
    1. 2009 год – еще одна команда разработчиков покерного ИИ
  13. 2011 год – появление покерных ботов в онлайн-покере
    1. 2011 год – появление покерных ботов в онлайн-покере
  14. 2015 год – лимитный холдем побит покерным ИИ, появление бота Клаудико
    1. 2015 год – лимитный холдем побит покерным ИИ, появление бота Клаудико
  15. 2017 год – “старший брат” Клаудико, Либратус, отомстил игрокам
    1. 2017 год – “старший брат” Клаудико, Либратус, отомстил игрокам

Развитие искусственного интеллекта в покере процесс неминуемый. Все больше и больше покерных профессионалов говорят, что пользуются современными технологиями для совершенствования своей игры. Взять хотя бы недавнее заявление члена команды профессионалов PartyPoker Айзека Хэкстона, который видит будущее онлайн-покера тесно связанным с ИИ.

Вообще, тема искусственного интеллекта в покере очень любопытна. Вопрос – почему ей уделяют гораздо больше внимания, чем, к примеру, искусственному интеллекту в шахматах? Все дело в сложности. Гораздо проще решить игру, в которой информация является общедоступной. В шахматах вся информация лежит на поверхности: расположение фигур на доске, предыдущие и будущие возможные ходы игроков.

Тот кто лучше и быстрее может проанализировать всю эту информацию, тот и будет победителем. И тут у человека и его мозга просто нет шансов перед компьютером. Простой пример. Кто быстрее и лучше сможет проанализировать базу данных из тысячи рандомных 8-значных чисел на предмет наличия в каждом цифр 1 и 3? Правильно – компьютер.

Конечно, человек тоже справится с этим легким поручением, только на это уйдет гораздо больше времени.

В решении задач, где известны абсолютно все переменные, компьютер просто всухую громит человека. Но порядок дел сразу меняется, как только одна или несколько переменных становятся неизвестными. Помимо большого количества щедрых фишей, покер замечателен еще и тем, что является идеальной “задачей” с известными и неизвестными переменными.

В одной из своих статей я рассказывал про хакатон от Сбербанка. Вкратце расскажу его суть. Сбербанк в прошлом году проводил конкурс на создание покерного бота. Если вы впервые слышите эту новость, то у вас может возникнуть резонный вопрос: “Какое дело Сбербанку до покерных ботов? Неужто Греф хочет начать в карты играть?”

Развитие искусственного интеллекта в покере за 20 лет 1

Все дело в оптимизации процессов. Сбербанк (как и любой другой банк в мире) хочет зарабатывать больше денег. В один момент топ-менеджмент Сбербанка осознал, что добился почти максимального уровня дохода. Но “почти максимального” не значит “максимально возможного”.

Как гласит известная поговорка, “сэкономленный рубль – заработанный рубль”. И далее ход мыслей руководителей Сбербанка становится предельно понятным. Всем известно, что рядовые сотрудники любят пинать балду в рабочее время. Так почему бы нам не сократить штат сотрудников и не оптимизировать рабочий процесс таким образом, чтобы у оставшихся людей не было времени пинать эту самую балду, и они могли работать наиболее продуктивно?

Вот и решил Сбербанк с целью оптимизации рабочего процесса прибегнуть к помощи покерного ИИ.

К слову, пока дела с оптимизацией рабочего процесса у Сбербанка обстоят туго. Судить я могу по рассказам моей девушки, которая работает управляющим менеджером одного из операционных центров. В этом году им сверху пришел приказ о сокращении штата. Также в этом приказе было сказано, что норму всех оставшихся сотрудников необходимо поднять до 106%. Вот вам и чудеса оптимизации, сокращение людей и распределение их обязанностей между теми, кто остался.

Видимо, покерный бот, который одержал победу на хакатоне, не оправдал возложенных на него надежд (читай – полностью провалился). Что, в принципе, не мудрено, создать крутого покерного бота по силам только крутому покерному игроку. А какой крутой игрок продаст крутого покерного бота за 500,000 рублей? Настоящий замкнутый круг.

Развитие можно рассматривать под двумя противоположными углами – “что было до” и “что будет после”. Второе, в большинстве случаев, сводится к банальному гаданию на кофейной гуще, так как реально оценить перспективы чего-либо редко у кого получается. Поэтому свой сегодняшний пост я хотел бы посвятить истории развития искусственного интеллекта в покере. Здесь мне не придется заниматься “угадайкой”, я лишь расскажу о том, как с течением времени менялся покерный ИИ и представление людей о нем.

Профессионального игрока в покер Майка Каро можно считать отцом покерного ИИ. Именно он первым написал компьютерную программу “Орак”, против которой играли несколько игроков на WSOP 1984. Майк работал над “Ораком” на протяжении двух лет.

Примечательно, что сама игра не проходила на компьютере, программа лишь сканировала доступные ей карманные карты и общие карты на доске, и на основе этих данных выдавала те или иные действия, которые должен был сделать живой игрок. В одном из таких матчей “Орак” одержал победу не над абы кем, а над самим крестным отцом покера, Дойлом Брансоном.

В этом году начинается разработка покерного ИИ группой ученых из Альбертского университета. На сегодняшний день группа ученых из этого университета является крупнейшими исследователями покерных ботов в мире.

В 1997 году один из сильнейших шахматистов в истории Гарри Каспаров сошелся в поединке против шахматного бота “Deep Blue”. Этот поединок стал первым масштабным проигрышем в шахматы человека компьютеру.

Развитие искусственного интеллекта в покере за 20 лет 2

В этом же году начинает возрастать интерес к покерным ботам, так как фактически стало ясно, что в игре с полной информацией компьютер может превзойти человека. Спустя несколько месяцев после победы “Deep Blue” над Каспаровым, ученые Альбертского университета представляют первого в мире покерного бота под названием “Локи”, который заточен под игру за 9-макс столом.

Ученые Альбертского университета осознали, что создать бота под игру за 9-макс столом чрезвычайно сложная затея. Они апгрейдят Локи под хэдз-апы и переименовывают его в Поки. В этом же году выходит первая покерная видеоигра “Stacked” для Xbox. Рекламным лицом и главным персонажем этой игры стал Даниэль Негреану.

После создания Поки ученые из Альбертского университета решают сосредоточиться на разработке ботов для хэдз-ап игры. В 2002 году они выпускают два новых бота – PsOpti и Sparbot.

Без особого труда эти два бота, как и Поки, были повержены человеком, и в 2003 году команда ученых решает отойти от методологии, которую использовали разработчики шахматного бота “Deep Blue”. Это стало ключевым шагом в развитии покерного ИИ.

В этом году у ученых из Альбертского университета появились конкуренты. К разработке покерных ботов приступила команда из университета Карнеги-Меллона.

На форуме ACM впервые между собой сразились покерные боты от разработчиков Альбертского университета и университета Карнеги-Меллона. Данный форум проводится до сих пор.

В 2007 году состоялся первый официальный хэдз-ап матч между профессиональным игроком Филом Лааком и новым ботом “Polaris”, который разработали ученые из Альбертского университета. Несмотря на неплохую игру бота, Фил Лаак все одержал победу. Человечество – 1, покерные боты – 0.

У ученых из Альбертского университета и университета Карнеги-Меллона появляются коллеги из университета Окленда. В этом же году они представили своего первого покерного бота “Sartre”.

Этот год можно смело назвать самым провальным для онлайн-покера. Мало того, что весной случилась печально известная “Черная Пятница”, так еще было засвидетельствовано повальное количество ботов в румах PokerStars и Full Tilt Poker.

В этом же году начинается борьба с ботами в онлайне. Покер-румы начинают активно работать над ПО, которое может распознавать ботов и отличать их от реальных пользователей.

Настоящий прорыв в разработке покерного ИИ произошел в 2015 году. Именно тогда компьютер побил игру в хэдз-ап матчах в лимитном холдеме. Разработать такого серьезного бота смогли ученые из Альбертского университета. Небольшой спойлер: на момент написания этой статьи, середина марта 2018 года, хэдз-ап в лимитном холдеме является единственным форматом, где компьютер доминирует над человеком. Держитесь от игрой подальше.

Развитие искусственного интеллекта в покере за 20 лет 3

В этом же году ученые из университета Карнеги-Меллона представляют покерного бота Клаудико. Клаудико сталкивают в хэдз-ап матче по безлимитному холдему против команды 4 профессиональных игроков, которую возглавляет Даг Полк. Отыграв 80,000 рук против Клаудико игроки смогли показать профит в $732,713.

Разработчики Клаудико представляют нового покерного бота под названием Либратус. Либратус является доработанной версией Клаудико. В повторном матче против других четырех профессионалов Либратус на протяжении уже 120,000 рук смог показать профит $1,766,250 в хэдз-апах по безлимитному холдему.

После матча игроки отзывались о Либратусе как о настоящей GTO-машине. И хоть для плюсовой игры против человека Либратусу нужны довольно строгие условия (наличие очень глубокого стека определенного размера), можно предположить, что следующий шаг развития покерного ИИ уже не за горами.

Эксклюзивная сделка на 888Poker
Предлагаем нашим игрокам приватную сделку на 888Poker с максимальным возвратом рейка и постоянный доступ к следующим плюшкам:
  • PRO-сделка при 300+ рейка
  • Бонус 100% до $800
  • Регулярный доступ в VIP Клуб
  • Майнинг от 2 до 1000NL
Рекомендуем

Возврат рейка до 60%

Плюшки от нас
Преимущества для наших игроков
Зарегистрируйтесь на partypoker через наш сайт и получите ряд дополнительных бонусов:
ОБЗОР partypoker

Возврат рейка до 60%

Плюшки от нас
Преимущества для наших игроков
Зарегистрируйтесь на GGPokerOK через наш сайт и получите ряд дополнительных бонусов:
ОБЗОР GGPokerOK

Возврат рейка до 67%

Плюшки от нас
Преимущества для наших игроков
Зарегистрируйтесь на Покердом через наш сайт и получите ряд дополнительных бонусов:
ОБЗОР Покердом

Возврат рейка до 30%

Плюшки от нас
Преимущества для наших игроков
Зарегистрируйтесь на 888Poker через наш сайт и получите ряд дополнительных бонусов:
ОБЗОР 888Poker

Возврат рейка до 90%

Плюшки от нас
Преимущества для наших игроков
Зарегистрируйтесь на PokerKing через наш сайт и получите ряд дополнительных бонусов:
ОБЗОР PokerKing

Возврат рейка до 40%

Плюшки от нас
Преимущества для наших игроков
Зарегистрируйтесь на TigerGaming через наш сайт и получите ряд дополнительных бонусов:
ОБЗОР TigerGaming

Возврат рейка до 5%

Мгновенный бонус $30

ОБЗОР PokerStars

Возврат рейка до 55%

Плюшки от нас
Преимущества для наших игроков
Зарегистрируйтесь на BestPoker через наш сайт и получите ряд дополнительных бонусов:
ОБЗОР BestPoker

Возврат рейка до 45%

Плюшки от нас
Преимущества для наших игроков
Зарегистрируйтесь на RedStar через наш сайт и получите ряд дополнительных бонусов:
ОБЗОР RedStar

Возврат рейка до 40%

Плюшки от нас
Преимущества для наших игроков
Зарегистрируйтесь на Покерматч через наш сайт и получите ряд дополнительных бонусов:
ОБЗОР ПокерМатч

Возврат рейка до 45%

Плюшки от нас
Преимущества для наших игроков
Зарегистрируйтесь на BetOnline через наш сайт и получите ряд дополнительных бонусов:
ОБЗОР BetOnline

Возврат рейка до 40%

Плюшки от нас
Преимущества для наших игроков
Зарегистрируйтесь на Unibet через наш сайт и получите ряд дополнительных бонусов:
ОБЗОР Unibet

Возврат рейка до 45%

Плюшки от нас
Преимущества для наших игроков
Наши игроки получают ряд дополнительных бонусов от сайта:
ОБЗОР SportsBetting
Платежные системы
VIP условия в платежках
Льготные тарифы
Ускоренная верефикация
Ознакомиться с платежками

Подпишись на официальный YouTube канал PekarStas и не пропусти ни одно новое видео!
Подписаться
Фрироллы
принять участие
PekarStas $100 Tourney
2 декабря, 20:00
принять участие
Unibet €250 Freeroll
2 декабря, 21:00
принять участие
PekarStas Freeroll $50
3 декабря, 20:00
Расписание и пароли
Похожие статьи
Интересное о покере
PekarStas
PekarStas
Биохимия покера — почему учащенно бьётся сердце во время игры
21 окт
625
1
Интересное о покере
ArtyGoal
ArtyGoal
Какими должны быть покерные турниры - мнение профессионалов
19 дек
636
2
Интересное о покере
D.V.
D.V.
Джейсон Кун описал мыслительный процесс профессиональных МТТ-игроков
11 дек
1144
1
Интересное о покере
Govard
Govard
Разбираемся как работает ГСЧ в онлайн покере
2 июл
2808
1
ПОСМОТРЕТЬ ЕЩЕ
Интересное о покере
Den777
Den777
С NL25 до игры на NL600 за полтора года — впечатляющие результаты нашего форумчанина
18 дек
3068
5
Интересное о покере
D.V.
D.V.
Мартин Якобсон: «Покер и фитнес идут рука об руку»
21 июл
211
0
Интересное о покере
ArtyGoal
ArtyGoal
Самый популярный покерный стример о PCA 2019, Твитче и привлекательности покера для любителей
8 янв
773
0
Интересное о покере
ArtyGoal
ArtyGoal
Руководство по экспорту истории раздач с partypoker во все популярные трекеры
21 янв
3450
14
Архив всех статей
Будьте первым, кто оставит свой комментарий!
Что бы оставить комментарий, пожалуйста авторизуйтесь на сайте.
  • Вы сможете оставлять комментарии, участвовать в дискуссиях и повышать свой уровень игры.
  • У вас будет личный кабинет с множеством настроек и доступом к уникальным предложениям.
  • Вам станут доступны уведомления, закладки и другие удобные инструменты сайта.
  • При возникновении каких-либо вопросов вам будет доступен раздел "Помощь".
  • Пользователи сайта могут получить доступ в закрытый VIP Клуб с эксклюзивным материалом.
В каких покер-румах можно играть с покер худом и майнингом
Эксклюзивная рейк-гонка на $50,000 на partypoker для наших игроков
Даём рекомендации какой покер-рум лучше выбрать для игры в 2020 году