Facebook с партнёром создали ИИ-бота, способного победить в покере на шесть игроков Статьи редакции

ИИ впервые смог победить в сложной игре с более чем двумя участниками, говорят в Facebook.

Специалисты Facebook и Университета Карнеги-Меллона (Carnegie Mellon University, CMU) создали бота Pluribus на основе искусственного интеллекта (ИИ), который сумел одолеть противников в покере на шесть игроков. Об этом говорится в блоге Facebook, подробности о разработке также опубликованы в журнале Science.

Специалисты заставили Pluribus сыграть с профессиональными игроками в покер, в том числе двумя победителями World Series of Poker. Бот одержал победу в безлимитный Техасский холдем на шесть игроков.

Для эксперимента было выбрано два формата: пять человек играли с одним ИИ за столом и один человек играл с пятью одинаковыми ботами. В обоих случаях стартовый стек составлял 10 тысяч фишек. Малый блайнд — 50 фишек, а большой блайнд — 100 фишек.

В игре с пятью людьми было проведено 10 тысяч раздач в течение 12 дней. Чтобы уменьшить роль удачи, специалисты использовали метод уменьшения дисперсии AIVAT. В результате winrate Pluribus оценивался в пять больших блайндов на 100 рук. Если бы каждая фишка стоила доллар, бот выиграл бы в среднем $5 за раздачу и заработал около $1 тысячи в час.

Во втором эксперименте пять ИИ-ботов играли против одного человека — профессионального покериста. Каждый из трёх участников теста разыграл 5 тысяч рук. В совокупности игроки потеряли 2,3 больших блайнда на 100 рук.

Покер считается проблемной игрой для ИИ, поскольку включает скрытую информацию о картах соперников, а для победы нужны стратегии, отличные от шахмат или других игр, например, блеф. Победа Pluribus — первый случай, когда ИИ смог победить в игре, в которой участвует более двух игроков, указывают в Facebook.

В отличие от го или шахмат, большинство проблем, которые перед нами стоят — например, борьба со спамерами или иностранным вмешательством — требуют победы сразу над несколькими противниками. При этом у нас нет полной информации о их ресурсах или стратегиях.

Игра в покер больше всего похожа на эти условия, а создание ИИ, способного одолеть лучших в мире игроков, — важный этап в развитии технологий.

Марк Цукерберг, глава Facebook

Несмотря на то, что Pluribus был разработан для игры в покер, используемые им стратегии могут использоваться и в других областях, говорят в Facebook. Специалисты отмечают, что Pluribus используется как инструмент для исследований ИИ и его игра в покер — только показатель прогресса в этой области.

0
37 комментариев
Написать комментарий...
Саша Миронюк

не представляю, сколько такой бот может стоить на черном рынке. Миллиард?

Ответить
Развернуть ветку
Sergey Sergey

Это должно было произойти, и если это не фейк - то огромный шаг в развитии ИИ

Ответить
Развернуть ветку
Dr. Acula

Почему это огромный шаг? Я слабо знаю правила покера. Но там вроде вся игра строится на тервере, разве нет? Ну там же просто надо подсчитать какие карты могут быть у остальных 5 игроков и прикинуть свои шансы на победу относительно этого, вроде бы ничего сложного. Игра в го была в разы сложнее, и скорее победа в ней огромный шаг для развития ИИ.

Ответить
Развернуть ветку
Аккаунт удален

Комментарий недоступен

Ответить
Развернуть ветку
Саша Миронюк

по логике, если у бота есть данные по игрокам (когда трибетит, когда фолдит и тд.), он будет пиздец каким плюсовым против них.

Ответить
Развернуть ветку
Аккаунт удален

Комментарий недоступен

Ответить
Развернуть ветку
Саша Миронюк

наверно потому, что бот будет ее использовать в разы лучше человека?

Ответить
Развернуть ветку
Аккаунт удален

Комментарий недоступен

Ответить
Развернуть ветку
Саша Миронюк

ты взял грандов покера, таких единицы и это сравнение неуместно.

Если бы всё было так очевидно, мы бы давно получили необыгрываемого бота

так речь в статье, что бот уже научился обыгрывать людей, 10 000 рук - нормальная дистанция. В статье не сказано, была ли инфа по оппонентам у бота, но подозреваю, что не было. Теперь представь, если его запустить в покер румы и загрузить базы данных игроков. Золотая жила.

По факту, этого нельзя допустить, иначе онлайн покер вымрет.

Ответить
Развернуть ветку
Ioanne

10к рук это говно, а не дистанция.
Стрики могут быть и в 500к рук.

Ответить
Развернуть ветку
Аккаунт удален

Комментарий недоступен

Ответить
Развернуть ветку
Sergey Sergey

К чему драматизм?! Сейчас ребята создадут сервис «защиты от ботов ИИ» и продадут его за нехилые деньги всяким покер-сайтам

Ответить
Развернуть ветку
Влад Виолентий

Покер румы скорее за стол посадят этого бота, что бы он прибыль приносил

Ответить
Развернуть ветку
Anton Vladimirovich

Боты для покеров и всяких бирж писали и будут писать, но вот чтобы в + играть это уже другой уровень
Молодцы

Ответить
Развернуть ветку
Аккаунт удален

Комментарий недоступен

Ответить
Развернуть ветку
Anton Vladimirovich

Когда вы сидите с другой стороны баррикад, для вас все так и будет, пиз нах бл*** - страдайте

Ответить
Развернуть ветку
Eugene Gultyaev

Упрлс?

Ответить
Развернуть ветку
Roman Zharenkov

"Flash Boys" - теперь это кросс-индустриальный нон-фикшн

Ответить
Развернуть ветку
Семен Смирнов
Покер считается проблемной игрой для ИИ, поскольку включает скрытую информацию о картах соперников, а для победы нужны стратегии, отличные от шахмат или других игр, например, блеф

Не совсем понятно, в чем именно проблема. Есть известная информация, на основе нее строятся гипотезы с вероятностями, на каждом шаге идет обновление данных

Тот же блеф вполне укладывается в алгоритмы if-else

Нейросети, графы, теория игр все это охватывает

Ответить
Развернуть ветку
Влад Виолентий
Ответить
Развернуть ветку
Konstantin Ivanov

глаза болят от описания раздач, какую же чушь там пытаются показать.

Ответить
Развернуть ветку
Eugene Danilov

поясните

Ответить
Развернуть ветку
Konstantin Ivanov

неадекватно сравнивать с реальной жизнью про игроков олл-ин в первой же раздаче когда банк копеешный. это не блеф, это бредятина.

или ставить пол стека после чека на ривере

это не хорошая игра и на дистанции это лузовая игра

Ответить
Развернуть ветку
Борис Медведев

Ну, когда он пошел олл-ин при копеечном банке, логика таки есть - у него не готовая комбинация, в данный момент вообще ничего, но 12 карт в колоде позволяют собрать флеш или стрит, если они придут на стол. Поддерживая 2 ставки бот мог бы потерять много фишек, а выиграть лишь в половине случаев примерно (25% на победу на терне и еще 25% на ривере). В банке уже 1200 фишек, учитывая ставку оппонента по правую руку, и бот рассчитывал забрать эти деньги без борьбы, а чаще всего так и будет происходить. В тех же случаях, когда его ставку поддержат - он будет еще иметь 50% на то, чтобы забрать деньги и банка и оппонента.

Ответить
Развернуть ветку
Konstantin Ivanov

в этом то и дело, что у него нет комбинации и он пихает стек в маленький банк на чужую агрессию.
то что они называют в видео "massive bluff" в реальной жизни называет неадекват за столом. у него там не по 25% шанса на терне и ривере, потому что у противников могут быть более сильные карты. может выйти 4бубей и любая десятка\четверка.
и 25% на комбинацию это 75% на её отсутствие)

в этом видео дебильные примеры игры и дебильнейшее описание решений

Ответить
Развернуть ветку
Борис Медведев

Ок, напиши, пожалуйста, все руки, с которыми ты бы стал коллировать олл-ин на таком флопе?

Ответить
Развернуть ветку
Wilgelm Volman

Очень маленькое количество раздач.

Ответить
Развернуть ветку
Idevd Na

На конкурсе сбербанка уже написали ботов на 9 игроков: http://pushbot.ru

Ответить
Развернуть ветку
Sergei Popov
>ИИ впервые смог победить в сложной игре с более чем двумя участниками, говорят в Facebook.

На сегодняшний день это неправда: как минимум в апреле боты от OpenAI выиграли в Dota 2 в игре 5 на 5 у чемпионов The International 2018.

Но новость радует.

Ответить
Развернуть ветку
Евгений Никитин

Да, причем обыграли "в салат". При этом, люди практически ничего не могли им сделать 30 минут игры, только после этой отметки ИИ начинали тупить. Видимо, алгоритмы ИИ не были настроены на столь продолжительные игры.

Ответить
Развернуть ветку
Sergei Popov

Вообще тут скорее имеется в виду, что каждый из игроков играет сам за себя. В Dota 2 хоть игроков и больше двух, но команды-то две.

Ответить
Развернуть ветку
vlad kriloff

Так вот чем Цукерберг на самом деле занимается. Спалился

Ответить
Развернуть ветку
Alexey Ivanov

Вопрос в том, а сколько разработок они НЕ показывают?

Ответить
Развернуть ветку
Simple Postflop

В данном боте не используется каких-то новых технологий. По сути используется комбинация решений из программ Simple Preflop Holdem и Simple Postflop.

Ответить
Развернуть ветку
Igor Karklin

Отлично! Этот чувак успел зарегаться и рекламу дать!
Ваши еботы так могут?

Ответить
Развернуть ветку
ChiVasShoW

Facebook бы лучше нормальную поддержку пользователей сделал, обратную связь вменяемую. А то как проблема какая-то возникает, то хз что делать. Ни написать, ни позвонить. Мою свежезарегистрированную страничку мурыжили 3 дня со статусом "верификация", а в итоге написали, что она не соответствует требованиям СБ и заблокировали. Какой-то фарс)

Ответить
Развернуть ветку

Комментарий удален модератором

Развернуть ветку
Delov Dmitriy
Ответить
Развернуть ветку
34 комментария
Раскрывать всегда