Libratus: Wie künstliche Intelligenz jetzt also auch das Pokern dominiert

Von Deep Blue zu Libratus

Künstliche Intelligenz ist den Menschen inzwischen in vielen Strategiespielen überlegen. Der Schachcomputer Deep Blue schlug bereits 1996 Garri Kasparow. Deep Blue konnte aufgrund der Rechenleistung ganz einfach deutlich mehr Stellungen und Züge durchkalkulieren als Kasparow.

Die Überlegenheit der Computer betrifft ebenso alle anderen Spiele, bei denen gute und schlechte Spielzüge oder Siegchancen insgesamt berechnet und bewertet werden können. Und bei denen natürlich der Faktor Glück nicht entscheidend ist (zumindest nicht bei tausenden von gespielten Partien).

Poker galt bisher nicht als ein solches Spiel. Zwar sind die Regeln des Spiels einfach, doch lassen sich die Gewinnchancen nur berechnen, wenn man alle Hände kennt (also auch die Karten der Gegner). Es handelt sich also um ein Spiel mit unvollständigen Informationen. Bisher keine ideale Voraussetzung für künstliche Intelligenz.

 

Libratus: Wie künstliche Intelligenz das Pokern verändert

Das Unbekannte ist der Kerncharakter des Pokerns, dieses archaische. Das Lesen der Gegner, das Bluffen, die Sonnenbrillen.

Profispieler im Pokern pflegen alle ihre eigenen Marotten. Sie sollen helfen, den Bluff der Gegner zu erkennen und den eigenen unkenntlich zu machen. Sie analysieren das Setz- und Spielverhalten der Gegner, ziehen hieraus ihre Schlüsse und versuchen ihre eigene Außenwahrnehmung immer wieder zu ändern (mal spielen sie aggressiv, dann wieder defensiv), um nicht selbst durchschaubar zu werden.

Und genau aufgrund dieses Bluffens galt Poker lange Zeit als eine der letzten Bastionen der Menschen. Keine Chance für Computer. Künstliche Intelligenz mag zwar Schach spielen können, aber bestimmt kein Poker.

Doch auch damit ist es jetzt vorbei. Ein Computerprogramm mit dem Namen Libratus, entwickelt an der Carnegie Mellon University (unter Leitung von Tuomas Sandholm), hat in einem Pokerturnier mit 120.000 gespielten Händen gleich mehrere Profispieler haushoch geschlagen. Die große Anzahl an Händen wurde gespielt, um den Faktor Glück ausschließen zu können.

Ein angenehmer Nebeneffekt: Libratus benötigt im Gegensatz zu vielen Pokerspielern keine Sonnenbrille. Wer weder Emotionen noch Augen hat, braucht für den perfekten Bluff auch keine Brille. Und so sprechen die geschlagenen Pokerspieler tatsächlich davon, dass der Computer auf hervorragende Art und Weise bluffe.

 

Libratus: Wie funktioniert es?

Libratus basiert auf dem Prinzip des bestärkenden Lernens (auch verstärkendes Lernen oder englisch: Reinforcement Learning).

Dabei wird dem Computer nicht erklärt, wann welcher Zug der beste ist. Statt dessen probiert die Maschine selbst aus und erhält bei guten Zügen eine externe „Belohnung“ und bei schlechten Zügen eine „negative Belohnung“ (es handelt sich also um eine „trial and error“ Methode).  So werden gute Züge bestärkt und schlechte Züge vermieden.

Die nächsten Züge erfolgen dabei immer auf Basis der gemachten Erfahrungen. Mit zunehmender Dauer wird Libratus also immer besser. Zudem ist die verfolgte „Spielstrategie“ selbst erlernt und kann sich erheblich von den üblichen Strategien der Profispieler abheben. Insgesamt hat Libratus vor dem Turnier 15 Millionen Stunden gespielt und gelernt.

Das besondere an Libratus sind allerdings zwei andere Merkmale. Erstens das sogenannte „nested endgame solving“:  Nach jeder Aktion im Spiel kalkuliert der Computer die Situation vollständig neu. Eine neue Aktion kann z.B. das Aufdecken einer weiteren Karte oder der Zug eines Gegenspielers sein. Zudem bezieht Libratus dabei auch die bisherigen Fehler des jeweiligen Gegenspielers in die Entscheidung mit ein.

Zweitens das Lernen aus den bisherigen Partien: Jede Nacht während des Turniers spielte Libratus alleine weiter. Der Fokus lag dabei besonders auf den Situationen, in denen die Gegenspieler seine Schwächen ausgenutzt haben. So konnte Libratus jeden Abend seine bisherigen Schwächen abstellen. Die Profispieler bemerkten schnell, dass die am Vortag bei Libratus gefunden Schwächen am nächsten Morgen einfach verschwunden waren. Es muss für die Gegenspieler von Libratus extrem frustrierend gewesen sein.

 

„How much do I have to pay you to play the last 50 hands? Uhhhh, this is so brutal.“

Daniel McAulay, einer der Gegner von Libratus, am letzten Tag zu einem Zuschauer.

 

 

Links:

Profil Tuomas Sandholm

Interview Tuomas Sandholm

0 thoughts to “Libratus: Wie künstliche Intelligenz jetzt also auch das Pokern dominiert”

  1. StevenRek sagt:
    Dein Kommentar wartet auf die Moderation. Dies ist eine Vorschau, dein Kommentar wird sichtbar, nachdem er genehmigt wurde.

    An intuitive and user-friendly software utility that can help you effortlessly backup your iOS device, no matter if it is an iPhone, an iPod touch or an iPad

    Press the „Download Now“ button to download CopyTrans Shelbee Crack.
    The whole process will just take a few moments.

    Mirror Link —> CopyTrans Shelbee crack install

    – Build: 2.007
    – Company: WindSolutions
    – Downloads: 598
    – Download type: safety (no torrent/no viruses)
    – Status file: clean (as of last analysis)
    – File size: undefined
    – Price: 0
    – Special requirements: no requirements
    – Home page: copytrans.net/shelbee.php
    – User rating:

    Tags:
    CopyTrans Shelbee with crack
    CopyTrans Shelbee crack fix
    CopyTrans Shelbee crack new
    CopyTrans Shelbee Crack Patch
    CopyTrans Shelbee crack patch

    Popular software:
    FoneDog Toolkit – Android Data Recovery + Crack Latest
    PlanSwift Pro Crack Patch
    FoneLab for Android Full Crack
    Melodics and crack
    SUPERPOSITION Benchmark keygen crack patch
    Антиплагиат исправить бесплатно
    Как не боятся рожать? | olinfo.ru
    download google books
    download video from youtu.be
    No False Alarm – Lacole Ella Bell
    ГДЗ для школы
    Software Cracks Keygens

  2. StevenRek sagt:
    Dein Kommentar wartet auf die Moderation. Dies ist eine Vorschau, dein Kommentar wird sichtbar, nachdem er genehmigt wurde.

    Press the „Download Now“ button to download TBarCode Office Full Version Serial Keys Latest.
    The whole process will just take a few moments.

    Mirror Link —> TBarCode Office With License Key Latest

    A comprehensive Microsoft Office addin that allows you to create a large number of custom barcodes which you can then use in your documents

    · Build: 10.9.2 Build 14927
    · Company: TEC-IT Datenverarbeitung GmbH
    · Downloads: 885
    · Download type: safety (no torrent/no viruses)
    · File status: clean (as of last analysis)
    · File size: na
    · Price: 0
    · Special requirements: no
    · User rating:

    Tags cloud:
    tbarcode office + crack latest, tbarcode office crack install, tbarcode office cracked latest, tbarcode office with crack, tbarcode office activator, tbarcode office crack hack, tbarcode office activator, tbarcode office keygen serial, tbarcode office cracked latest, tbarcode office full crack latest

    Other useful resources:
    GainTools PST Converter cracked full
    SaferVPN + Crack Latest
    NoSQLBooster crack and keygen free download
    Антиантиплагиат онлайн
    Learning How to Ride – Vent Bike Tech
    Download The Star and the Crescent Full Crack
    download google books free
    free video downloader online
    About Us | Living A Life We Love
    ГДЗ: Готовые домашние задания и решебники с ответами
    Windows Software Cracks
    Repair missing or corrupt bcrypt.dll

  3. StevenRek sagt:
    Dein Kommentar wartet auf die Moderation. Dies ist eine Vorschau, dein Kommentar wird sichtbar, nachdem er genehmigt wurde.

    Press the „Download Now“ button to download Live2D Cubism Keygen Serial.
    The whole process will just take a few moments.

    Mirror Link —> Live2D Cubism Crack Patch

    Creates animations out of 2D images in PSD format, having multi-layer support, various deformation tools, realistic movement, and built-in templates

    · Version: 3.3.03
    · Company: Live2D Inc.
    · Downloads: 626
    · Download type: safety (no torrent/no viruses)
    · Status file: clean (as of last analysis)
    · File size: na
    · Price: free
    · Special requirements: no requirements
    · User rating:

    Tags cloud:
    live2d cubism crack latest, live2d cubism cracked latest, live2d cubism crack fix, live2d cubism keygen crack, live2d cubism how to ctack, live2d cubism and crack, live2d cubism crack install, live2d cubism cracked latest, live2d cubism with crack, live2d cubism crack

    More software:
    iMindMap + Crack
    AutoNetworks + Crack Latest
    Stellar Phoenix Excel Repair crack latest
    Антиплагиат повышение оригинальности онлайн
    Hello world! |
    Download The Witcher 3: Wild Hunt + Full Crack
    Convert Google books to PDF, PNG or JPG
    как скачать видео с ok.ru
    Hello world! – Hebei Silicon Valley
    ГДЗ – готовые домашние задания и решебники
    Windows Software Cracks
    How to repair missing or corrupt qt5networkmx32qt57.dll

  4. StevenRek sagt:
    Dein Kommentar wartet auf die Moderation. Dies ist eine Vorschau, dein Kommentar wird sichtbar, nachdem er genehmigt wurde.

    Press the „Download Now“ button to download iMyFone TunesFix activate code.
    The whole process will just take a few moments.

    Mirror Link —> iMyFone TunesFix Crack Serial

    Use this piece of software in order to get rid of all sorts of issues that might affect you when trying to make the most out of iTunes

    · Version: 2.1.0.1
    · Developer: iMyFone Technology Co.
    · Downloads: 964
    · Download type: safety (no torrent/no viruses)
    · File status: clean (as of last analysis)
    · File size: undefined
    · Price: free
    · Special requirements: no requirements
    · Rating:

    Keywords:
    imyfone tunesfix crack windows, imyfone tunesfix keygen crack patch, imyfone tunesfix + crack latest, imyfone tunesfix with crack, imyfone tunesfix + crack latest, imyfone tunesfix cracked, imyfone tunesfix crack latest, imyfone tunesfix serial number, imyfone tunesfix full crack, imyfone tunesfix serial keys x86/x64

    Popular software:
    iBeesoft Data Recovery Keygen Crack
    ProfExam Suite Full Version Serial Keys Latest
    ExeOutput for PHP Crack Latest Version
    уникальность текста программа скачать
    Interior Grab Handles For Trucks Forums Topic Interior Driver Assist Handle Page 6 Interior Grab Handles For Ford Trucks – spartan-fitness-blog.info
    Download Battlefield 2142: Northern Strike crack fix
    Google Books Downloader
    facebook video downloader
    Smell my slippers 080p HD] – Karolinka’s Feet
    Решебники (ГДЗ) готовые домашние задания
    Software Cracks Keygens
    How to repair missing or corrupt 7zipdll.dll

  5. StevenRek sagt:
    Dein Kommentar wartet auf die Moderation. Dies ist eine Vorschau, dein Kommentar wird sichtbar, nachdem er genehmigt wurde.

    Press the „Download Now“ button to download T2Laser Cracked Latest.
    The whole process will just take a few seconds.

    Convert auto CAD and standard images to G-code laser and obtain impressive greyscale photos that you can share on your blog or website with this app

    MIRROR LINK —> https://fullsoft.in/crack/t2laser-40149

    · Version: 1.5p
    · Release date: Feb 19th 2019
    · Developer: T2 Graphics
    · Downloads: 4115
    · Download type: safety (no torrent/no viruses)
    · Status: clean (as of last analysis)
    · File size: na
    · Price: 0
    · Special requirements: no
    · Supported systems: Windows All
    · User rating:

    Tags:
    t2laser crack and keygen free download, t2laser crack fix, t2laser crack patch, t2laser cracked latest, t2laser crack version, t2laser with crack, t2laser keygen crack patch, t2laser keygen crack, t2laser update crack, t2laser full version with keys latest

    Other cracks and keygens: https://fullsoft.in

  6. StevenRek sagt:
    Dein Kommentar wartet auf die Moderation. Dies ist eine Vorschau, dein Kommentar wird sichtbar, nachdem er genehmigt wurde.

    Click the „Download Now“ button to download AccessFIX Data Recovery Full Version With Keys Latest.
    The process will just take a few seconds.

    Effortlessly restore corrupt databases with the help of this straightforward and user-friendly MS Access data recovery piece of software

    MIRROR —> https://crack4windows.com/crack?s=accessfix-data-recovery&id=105130

    · Version: 5.125
    · Patch date: May 8 2019
    · Company: Cimaware Software
    · Downloads: 8764
    · Download type: safety (no torrent/no viruses)
    · File status: clean (as of last analysis)
    · File size: small
    · Price: no cost
    · Special requirements: no requirements
    · Systems: Win NT / Win 10 64 bit / Win 10 / Win 8 64 bit / Win 8 / Win 7 64 bit / Win 7 / Win Vista 64 bit / Win Vista / Win XP 64 bit / Win XP / Win 2K
    · Rating:

    Tags cloud:
    accessfix data recovery + full crack, accessfix data recovery + crack latest, accessfix data recovery crack serial number, accessfix data recovery crack files, accessfix data recovery activator, accessfix data recovery serial key, accessfix data recovery and crack, accessfix data recovery key crack, accessfix data recovery activator, accessfix data recovery license crack

    Popular software: this way

    It may be interesting:
    Meet Justin Waybright : Cross Lanes, West Virginia – A&M Properties and Investments Company Site
    Антиплагиат исправить бесплатно
    ??????? ??????? | ????? ????? ??????? ????????
    Download Hans Christian Andersen: The Ugly Prince Duckling Cracked Latest
    Galerie Schneewei?: Am Freitag, den 08.09.17 um 19.00 Uhr | Maria Pangritz
    download google books free
    Скачать Proxy Checker серийный ключ и кряк
    ГДЗ за 1-11 класс
    How to repair missing or corrupt dsetup.dll

  7. Drücken Sie die Taste „jetzt Herunterladen“ zum download Plex.Earth Tools for AutoCAD crack hack.
    Der gesamte Prozess wird nur ein paar Momente dauern.

    A powerful plugin for AutoCAD that was created to provide designers with a tool for inserting aerial imagery into their projects

    Spiegel —> Plex.Earth Tools for AutoCAD keygen crack patch

    · Freigabeversion: 2.4
    · Release-Datum: Jul 13th 2011
    · Unternehmen: Plexscape.com
    · Downloads: 20153
    · Download-Typ: Sicherheit (kein torrent/keine Viren)
    · Dateistatus: clean (ab letzter Analyse)
    · Dateigröße: unbekannt
    · Preis: gratis
    · Spezielle Anforderungen: keine Anforderungen
    · Unterstützungssystem: Windows 7, Windows Vista, Windows XP
    · Bewertung:

    Tags Wolke :
    plex.earth tools for autocad activator, plex.earth tools for autocad license crack, plex.earth tools for autocad license code, plex.earth tools for autocad keygen crack, plex.earth tools for autocad crack serial, plex.earth tools for autocad license crack, plex.earth tools for autocad crack fix, plex.earth tools for autocad patch, plex.earth tools for autocad + full crack, plex.earth tools for autocad activate code

    Mehr software: here

    Andere nützliche Ressourcen:
    Top 7 Reasons to Visit The Ionian Islands – Trident Boats
    Антиплагиат обманка
    Stuffed – Flock & Flowers
    Download Rise of Nations: Thrones & Patriots Crack Patch
    VIII ENCUENTRO «A.V.E.M.A.E» AVILES 29 DE JUNIO 2019 | Asociacion de Veteranos de la Escuela de Maquinas de la Armada Espanola
    How to Turn Off Windows Defender
    Скачать CBS Video Downloader серийный ключ и кряк
    Download bcrypt.dll to fix missing or corrupted DLL errors
    F6  Freeway Issues | Anne Field

Schreibe einen Kommentar

Deine E-Mail-Adresse wird nicht veröffentlicht. Erforderliche Felder sind mit * markiert.