A pókerban is jobbak a számítógépek
A sakk és a go után immár a pókert is meghódította a mesterséges intelligencia: a DeepStack pókerprogram eddig az összes profi emberi játékost megverte, aki kiállt ellene.
Az Albertai Egyetem (Kanada) Számítógépes Póker Kutatócsoportjának legújabb fejlesztése, a DeepStack névre keresztelt mesterségesintelligencia-rendszer a professzionális póker világának nehézfiúit darálta be egy összesen 3000 leosztásból álló, négy hétig tartó játszmasorozatban. Ezzel a mesterséges intelligencia (MI) újabb jelentős trófeát aratott azok után, hogy számítógépes programok a sakk és a go emberi nagymestereit már korábban maguk mögé utasították. A pókerprogramot alkotó albertai kutatócsoport, melynek tagjai között a prágai Károly Egyetem és a Cseh Műszaki Egyetem munkatársai is szerepeltek, a Science folyóiratban adott hírt a történelmi győzelemről.
A póker nagy kihívás az MI számára
A póker a sakkhoz, a dámához és a góhoz képest egészen más feladattal szembesíti az MI-t. A táblajátékok esetében mindkét játékos teljesen tisztában van a játék állásával, a rendelkezésükre álló információ tehát teljes és szimmetrikus eloszlású.
A póker egészen más tészta: itt egyik játékos se ismeri a másik lapjait, ezért mindketten tökéletlen és aszimmetrikus eloszlású információ alapján kénytelenek döntéseket hozni. Ráadásul a póker szóban forgó változata, a Texas hold'em heads-up no-limit variánsa olyan komplex, hogy minden játékmenet során 10160 (egy egyes, utána százhatvan nullával) döntési pont adódik. Ez a szám messze nagyobb, mint ahány atom van a világegyetemben; ilyen feltételek mellett az összes lehetséges döntés végigelemzése nyilvánvalóan nem opció.
A számítógépnek ezért az „intuícióját" kell használnia, amelyet mély tanulási algoritmusok segítségével fejleszt. Ahelyett, hogy egészen a játék végéig megpróbálná lefuttatni a helyzetek elemzését, az emberekhez hasonlóan csupán néhány lépéssel gondolkodik előre, és minden döntés után felülvizsgálja a stratégiáját. Ezzel a módszerrel a döntési pontok számát 10160-ról 107-re redukálja, és ennyi műveletet egy közönséges laptop processzora is 5 másodperc alatt elvégez.
„A póker régóta nagy kihívás volt az MI számára – mondta el Michael Bowling, az Albertai Egyetem természettudományos fakultásának tanára és a tanulmány vezető kutatója. – Ez a játék a tökéletlen információ iskolapéldája, amennyiben a játékosok nem ugyanahhoz az információhoz férnek hozzá, és nem ugyanabból a perspektívából nézik a játékot.
" Bár pókerról lévén szó mindvégig játékról beszélünk, a tökéletlen információs játék valójában véresen komoly ügy: a vele foglalkozó matematikai modellek írják le a legjobban azt, ahogyan döntéshozó ágensek kölcsönhatnak a való életben. „Új MI technikákra van szükségünk azoknak a helyzeteknek a kezelésére, amelyekben a döntéshozók eltérő szemszögből látják az eseményeket" – állítja Bowling, hangsúlyozva, hogy a tökéletlen információs játékokat megoldó MI algoritmusok alkalmazhatósága messze túlmutat a kaszinók világán. – „Gondolhatunk szinte bármilyen valós problémahelyzetre. Valamennyi résztvevő kissé másmilyen perspektívából szemléli a helyzetet, ugyanúgy, ahogy a pókerjátékosok is csak a saját lapjaikat ismerik." Bowling szerint egyebek mellett a megfelelő orvosi kezelések kiválasztása és a védelmi stratégiák tervezése terén kínálkoznak a legkézenfekvőbb alkalmazások.
Profikat győzött le
A kanadai programozók nem ma kezdték a tökéletlen információs játékokkal való birkózást. Az Albertai Egyetemen 1996-ben állt fel a Számítógépes Póker Kutatócsoport, amelyet 2006 óta Bowling vezet. 2008-ban a csoport kifejlesztette a Polaris nevű programot, amely a Texas hold'em póker egy kevésbé komplex változatát, a heads-up limitet játszotta, és ebben a versenyszámban győzte le sorra a játék emberi bajnokait. Ezt követte a 2015-ben publikált Cepheus, majd a 2016-ban debütált DeepStack.
„A felkészülés során a rendszerünknek megtanítjuk az egyes állásokhoz rendelhető értéket – magyarázza Bowling. – Minden helyzet maga is egy mini-pókerjátszma. Ahelyett, hogy a program egy nagy pókerjátszmát oldana meg, kis játszmák millióit elemzi végig, s mindegyik elemzés tovább csiszolja az intuícióját arról, hogyan is működik a póker. És ez az intuíció hajtja előre a DeepStack-et az egész játék során."
Az olyan komplex problémák kezelésében, mint a heads-up no-limit hold'em, fontos az éppen felmerülő szituációk értékelése. Annak köszönhetően, hogy a program csak belátható mélységben gondolja mindig újra a stratégiát, az egyes döntések a játék bonyolultsága ellenére is emberi időléptékben zajlanak. A 3-5 másodperces gondolkodási időt egy teljesen közönséges, Nvidia grafikus processzorral felszerelt laptop is könnyűszerrel tudja tartani.
A DeepStack megmérettetésére tavaly decemberben került sor, amikor a Nemzetközi Pókerszövetség 17 ország 33 játékosát kérte fel az MI-rendszerrel való erőpróbára. A játékosokat arra kérték, hogy négy hét leforgása alatt egy 3000 leosztásból álló játszmasorozatot játsszanak a számítógéppel. Végül csak 11-en játszották végig a teljes sorozatot; a DeepStack valamennyiüket megverte, egy kivétellel statisztikailag szignifikáns mértékben. Ezzel a DeepStack lett az első számítógépes program, amely professzionális játékosokat győzött le a heads-up no-limit Texas hold'em pókerban.
hírek innen, onnan
Vége a fogszuvasodásnak? Ez a fogkefe lehet a megoldás
A kutatók megtalálták a választ.
Valami nincs rendben a magnéziummal? Fontos dologra figyelmeztetnek a kutatók
Mutatjuk a részleteket!
Leépítés kezdődött a fideszes Századvégnél: „független elemző intézményként” folytatják a jövőben
Fókuszváltást jelentettek be.
Nem fogja elhinni, mennyibe került egy hot dog a Miami Nagydíjon
Pezsgőben úszott Miami.
Megvan, kiket jelöl a Tisza Párt az Országgyűlés alelnökének
A házelnököt és az alelnököket is a május 9-ei alakuló ülésen választják meg.
Friss hírek a Budapesten eltűnt olasz zenészről
A fiatal férfi május 1-jén tűnt el Budapesten, most kiderült, hol van.
Akadoznak a nagyobb összegű átutalások Magyarországon – frissítve
A háromnapos bankszünnap után.
Halvány remény: futó záporok érkeznek a szerencsésebb tájegységekre
Egyre melegebb idő várható, élénkülő légmozgással és kisebb csapadékkal.
A lehető legszigorúbb drónröptetési szabályok léptek életbe Peking felett
Megnéztük, hogy mi vonatkozik Washingtonra és Magyarországra.
Megvan, kiket jelöl a Tisza Párt az Országgyűlés alelnökeinek
Az egyik jelölt, Rák Richárd a Törvényalkotási Bizottság elnöki tisztségét is betölti majd.
Terjed az afrikai sertéspestis, a legnépszerűbb kerékpáros versenybe is beleszólhat
A spanyol hatóságok kiterjesztették a fertőzött övezeteket, miután újabb településeken azonosították a vírust a vaddisznóállományban.
Mint a mesében: 1001 hátrányos helyzetű gyerek jutott szemüveghez a Nemzetközi Gyermekmentő Szolgálat segítségével
A legkisebb „pályázó” 2 éves volt.
Sport
Szoboszlai a gólja és gólpassza után a Premier League-ben minden játékost megelőzött
Szoboszlai Dominik gólt és gólpasszt jegyzett a Manchester United elleni rangadón.
Riválisa még Verstappennél is súlyosabb büntetést kapott, változott a miami végeredmény
Nyolc pilóta ellen indult vizsgálat a Forma–1-es futam után.
Véget érhet egy korszak a magyar futballban, tíz év után új csatornára kerülhetnek az NB I-es mérkőzések
Hamarosan lezárul az MLSZ által kiírt pályázat.
Max Verstappen direkt ütközött a Forma–1 „gyilkosával"? Egyértelmű választ adott
Lewis Hamilton a balszerencsét okolta, a riválisát szándékosan elengedő Charles Leclerc a Ferrari mellett magát is szidta.
Egyre biztosabb, hogy a szezon végén távozik a Real Madrid ikonja
Az egyik hír vele kapcsolatban, hogy megsérült, a másik, hogy szinte biztosan távozik a szezon végén.
Elismerték a Liverpoolt sújtó bírói hibát, Slot szerint: „egész idényben így volt”
A Pgmol elismerte utólag, hogy érvényteleníteni kellett volna a Manchester United második gólját.
Szélesi túl indulatos volt a 0-5-ös derbi után: "Erre most inkább nem válaszolok"
Így értékelte az Újpest-FTC (0-5) mérkőzést Szélesi Zoltán.
A Szoboszlai-mágia is kevés volt: A saját térfeléről indulva szerzett gólt az MU elleni rangadón - videó
Újabb pazar gólt szerzett a Premier League-ben a magyar válogatott csapatkapitánya, aki ezt követően egy gólpasszt is kiosztott.
Szoboszlai világklasszisa és a válogatott kapusának elismerése
Vegyes hetet zártak a magyar légiósok.
„Komoly bunkóság volt" – brutálisan nekiestek a kommentelők a mutogató Szoboszlainak
A magyar válogatott csapatkapitánya üzent az MU-szurkolóknak. Nem kellett volna?
Botlott a Honvéd, de mégis kitört a kispesti örömünnep Szegeden
A rivális sem tudott nyerni, eldőlt a feljutásért folyatott harc.
Robbie Keane csak nevetett a derbi után, Szélesi alig bírt megszólalni
Az Újpest elleni kiütéses győzelem több szempontból is fontos volt a zöld-fehéreknek.
Bulvár
Újabb csapás Mészáros Lőrincnek és Semjén Zsoltnak, a NER-ről készült összefoglalóban tűntek fel kellemetlen szerepben
Nincs egy nyugodt napja a milliárdosnak, de Semjén Zsolt is előkerült a videóban.
A B12-vitamin-hiány és az időskori problémák
A B12-vitamin hiánya gyakori, sokszor azonban nem veszik észre idősebb felnőtteknél. Az idősödéssel együtt egyre több úgynevezett "geriátriai szindróma" jelenik meg, például a szellemi hanyatlás, az izomgyengeség
Nincs megállás a NKA botrányban, újabb celeb tálalt ki a guruló milliárdokról
Kivételesen nem Dopeman és nem Tóth Gabi került célkeresztbe, egészen más név merült fel.
Nagyon kínos, amit a lányok a budapesti éjszakában csinálnak: őszinte vélemény
Ha van kínos dolog szerintem, az az összekényszerített társaság, és a béna kérdőíves műsor. Kinek van szüksége erre a parádéra?
Higiéniai botrány a kórházban: 40 beteg kaphatta el a HIV-fertőzést, vagy a hepatitiszt
Mivel az orvosi személyzet nem tisztította meg megfelelően a sebészeti eszközöket, akár 40 beteg is megfertőződhetett HIV-vel vagy hepatitisszel egy quebeci kórházban. A vérvizsgálatok adhatnak most majd bizonyosságo
Egekben az izgalom. Magyar Péter friss közlése szinte mindenkit érint
Ma kora reggel érkezett a fontos jelzés Magyar Pétertől.
Kutyasétáltatás közben kötöttek bele Pintér Béla munkatársába az oligarchás előadás miatt
Pintér Béla munkatársának „húsz centiről üvöltöttek az arcába, hogy »Mit képzelsz magadról!!!??«”
Lényegében nem maradt embere a Tiszának a nagy győzelme után a fővárosi pozíciókra
Most ütött vissza, hogy két évvel ezelőtt ilyen rövid volt a listájuk.
Szörnyű tragédia a traktorfesztiválon: kisgyermek az áldozat
Borzalmas baleset árnyékolta be a prágai traktorfelvonulást, ahol egy gyermek életét vesztette.
Holtan találtak rá a negyedik orosz üzletemberre is, aki társaival horgászni ment a Volgára
Már hazafelé tartottak, amikor megszakadt velük a kapcsolat.
Dráma Budapesten: Élet-halál harc folyt a nyílt utcán
Egymást váltva küzdöttek az arra járók.
Szoboszlai a gólja és gólpassza után a Premier League-ben minden játékost megelőzött
Szoboszlai Dominik gólt és gólpasszt jegyzett a Manchester United elleni rangadón.
- Csökkent a gázolaj ára
- Leszakadt egy vasúti felsővezeték Érdnél, jelentős késésekre kell számítani
- NAV: sok változást hoz a jövedéki szabályozásban az új törvény
- Az E.ON nevével visszaélve téveszthetik meg a lakosságot
- Így úszható meg a hosszú várakozás a horvát autópálya-kapuknál
- A talált madárfiókák többsége nem árva, nem szorul megmentésre, ne szedjük össze őket!
- Már csak pár napig lehet pályázni az ingyen falfestékre
- Hosszú hétvégi változások, kedvezmények a vasúton
- Online térképen láthatóak a tervezett áram- és gázszünetek az E.ON oldalán
- Nagy összegű készpénzzel érkezik az Európai Unióba? Akkor erre figyeljen!
- Önkénteseket és ideiglenes befogadókat keresnek a Szegedi Cicamentők
- Szombaton hat helyszínen lesz Retro Véradás
- Lezárásokra, forgalomkorlátozásokra kell készülni ma és holnap Budapesten
