A pókerban is jobbak a számítógépek
A sakk és a go után immár a pókert is meghódította a mesterséges intelligencia: a DeepStack pókerprogram eddig az összes profi emberi játékost megverte, aki kiállt ellene.
Az Albertai Egyetem (Kanada) Számítógépes Póker Kutatócsoportjának legújabb fejlesztése, a DeepStack névre keresztelt mesterségesintelligencia-rendszer a professzionális póker világának nehézfiúit darálta be egy összesen 3000 leosztásból álló, négy hétig tartó játszmasorozatban. Ezzel a mesterséges intelligencia (MI) újabb jelentős trófeát aratott azok után, hogy számítógépes programok a sakk és a go emberi nagymestereit már korábban maguk mögé utasították. A pókerprogramot alkotó albertai kutatócsoport, melynek tagjai között a prágai Károly Egyetem és a Cseh Műszaki Egyetem munkatársai is szerepeltek, a Science folyóiratban adott hírt a történelmi győzelemről.
A póker nagy kihívás az MI számára
A póker a sakkhoz, a dámához és a góhoz képest egészen más feladattal szembesíti az MI-t. A táblajátékok esetében mindkét játékos teljesen tisztában van a játék állásával, a rendelkezésükre álló információ tehát teljes és szimmetrikus eloszlású.
A póker egészen más tészta: itt egyik játékos se ismeri a másik lapjait, ezért mindketten tökéletlen és aszimmetrikus eloszlású információ alapján kénytelenek döntéseket hozni. Ráadásul a póker szóban forgó változata, a Texas hold'em heads-up no-limit variánsa olyan komplex, hogy minden játékmenet során 10160 (egy egyes, utána százhatvan nullával) döntési pont adódik. Ez a szám messze nagyobb, mint ahány atom van a világegyetemben; ilyen feltételek mellett az összes lehetséges döntés végigelemzése nyilvánvalóan nem opció.
A számítógépnek ezért az „intuícióját" kell használnia, amelyet mély tanulási algoritmusok segítségével fejleszt. Ahelyett, hogy egészen a játék végéig megpróbálná lefuttatni a helyzetek elemzését, az emberekhez hasonlóan csupán néhány lépéssel gondolkodik előre, és minden döntés után felülvizsgálja a stratégiáját. Ezzel a módszerrel a döntési pontok számát 10160-ról 107-re redukálja, és ennyi műveletet egy közönséges laptop processzora is 5 másodperc alatt elvégez.
„A póker régóta nagy kihívás volt az MI számára – mondta el Michael Bowling, az Albertai Egyetem természettudományos fakultásának tanára és a tanulmány vezető kutatója. – Ez a játék a tökéletlen információ iskolapéldája, amennyiben a játékosok nem ugyanahhoz az információhoz férnek hozzá, és nem ugyanabból a perspektívából nézik a játékot.
" Bár pókerról lévén szó mindvégig játékról beszélünk, a tökéletlen információs játék valójában véresen komoly ügy: a vele foglalkozó matematikai modellek írják le a legjobban azt, ahogyan döntéshozó ágensek kölcsönhatnak a való életben. „Új MI technikákra van szükségünk azoknak a helyzeteknek a kezelésére, amelyekben a döntéshozók eltérő szemszögből látják az eseményeket" – állítja Bowling, hangsúlyozva, hogy a tökéletlen információs játékokat megoldó MI algoritmusok alkalmazhatósága messze túlmutat a kaszinók világán. – „Gondolhatunk szinte bármilyen valós problémahelyzetre. Valamennyi résztvevő kissé másmilyen perspektívából szemléli a helyzetet, ugyanúgy, ahogy a pókerjátékosok is csak a saját lapjaikat ismerik." Bowling szerint egyebek mellett a megfelelő orvosi kezelések kiválasztása és a védelmi stratégiák tervezése terén kínálkoznak a legkézenfekvőbb alkalmazások.
Profikat győzött le
A kanadai programozók nem ma kezdték a tökéletlen információs játékokkal való birkózást. Az Albertai Egyetemen 1996-ben állt fel a Számítógépes Póker Kutatócsoport, amelyet 2006 óta Bowling vezet. 2008-ban a csoport kifejlesztette a Polaris nevű programot, amely a Texas hold'em póker egy kevésbé komplex változatát, a heads-up limitet játszotta, és ebben a versenyszámban győzte le sorra a játék emberi bajnokait. Ezt követte a 2015-ben publikált Cepheus, majd a 2016-ban debütált DeepStack.
„A felkészülés során a rendszerünknek megtanítjuk az egyes állásokhoz rendelhető értéket – magyarázza Bowling. – Minden helyzet maga is egy mini-pókerjátszma. Ahelyett, hogy a program egy nagy pókerjátszmát oldana meg, kis játszmák millióit elemzi végig, s mindegyik elemzés tovább csiszolja az intuícióját arról, hogyan is működik a póker. És ez az intuíció hajtja előre a DeepStack-et az egész játék során."
Az olyan komplex problémák kezelésében, mint a heads-up no-limit hold'em, fontos az éppen felmerülő szituációk értékelése. Annak köszönhetően, hogy a program csak belátható mélységben gondolja mindig újra a stratégiát, az egyes döntések a játék bonyolultsága ellenére is emberi időléptékben zajlanak. A 3-5 másodperces gondolkodási időt egy teljesen közönséges, Nvidia grafikus processzorral felszerelt laptop is könnyűszerrel tudja tartani.
A DeepStack megmérettetésére tavaly decemberben került sor, amikor a Nemzetközi Pókerszövetség 17 ország 33 játékosát kérte fel az MI-rendszerrel való erőpróbára. A játékosokat arra kérték, hogy négy hét leforgása alatt egy 3000 leosztásból álló játszmasorozatot játsszanak a számítógéppel. Végül csak 11-en játszották végig a teljes sorozatot; a DeepStack valamennyiüket megverte, egy kivétellel statisztikailag szignifikáns mértékben. Ezzel a DeepStack lett az első számítógépes program, amely professzionális játékosokat győzött le a heads-up no-limit Texas hold'em pókerban.
hírek innen, onnan
Pályázatot hirdet az Oktatási Minisztérium, hogy a következő tanévben már több tankönyvből lehessen válogatni
A cél a tanulók számára elérhetővé tenni korszerű, pedagógiailag megalapozott kiadványokat, különösen a tanulók eltérő életkori,...
Nyilvános Orbán Viktor utolsó vagyonnyilatkozata
Harminchat évig volt képviselő, húsz évig miniszterelnök, de csak 9 millió forintot sikerült félretennie.
Idd ezt kávé helyett minden reggel és éberebb leszel, mint valaha
A tökéletes megoldás a reggeli fáradtságra
„Soha nem felejtünk” – megrázta Franciaországot egy 11 éves lány meggyilkolása
Lyhannáért napokon át tízezrek izgultak, holttestét egy gabonasilóban találták meg. Feltételezett gyilkosát hamar elfogták, de sokan a...
Az ukrán kormányfő megerősítette, hogy újabb pénzügyi támogatás érkezett az EU-tól
Ukrajna megkapta az Európai Uniótól az Ukraine Facility program keretében nyújtott finanszírozás hetedik részletét, amelynek összege 2,8...
Nyíregyházi győzelmével magyar bajnok lett az Újpest
Története első aranyát szerezte meg a lila-fehér gárda.
Ruff Bálint javaslatára felmentik a Kormányzati Ellenőrzési Hivatal elnökét
Magyar Péter alá is írta a felmentésről szóló határozatot.
Ha ezeket a növényeket elülteted, a vakond messziről kerülni fogja a kerted
Nincs idegesítőbb annál, mint amikor a gondosan ápolt, zöld pázsitot éktelen földkupacok csúfítják el. Mielőtt drága és ronda...
Elkezdődött a tiszavirágzás
A kérészek csak az utódnemzésért élnek, utána elpusztulnak. Nászuk egyedülálló magyar természeti jelenség.
Ezekkel az óriáshajókkal érkeznek Magyarországra is a kínai autók
Két saját, egyenként 7000 autó szállítására alkalmas Ro-Ro hajóval szolgálja ki az európai igényeket a Geely.
Öreg hiba, amit mindenki elkövet makacs dugulásnál: így úszhatod meg a szerelőt
Amikor nem folyik le a víz a konyhában, a legtöbben pánikszerűen az agresszív, nátrium-hidroxid alapú lefolyótisztítókhoz nyúlnak.
Kapitány István teljes miniszteri fizetését a Magyar Koraszülött és Újszülött Mentőalapítványnak ajánlja fel
A gazdasági és energetikai miniszter ezt hétfő este jelentette be.
Sport
El sem kezdődött a foci-vb, de már most az amerikaikon röhög mindenki
Az egyik főpróba nem sikerült jól, reméljük, a tornán már nem lesznek ehhez hasonló bakik.
Arne Slot kirúgása után visszatérne a Liverpool elzavart klasszisa
Új vezetőedző, új esély?
Újra összeesett meccs közben Christian Eriksen
A dán középpályás felkészülési meccsen vesztette eszméletét, szerencsére magához tért, saját lábán ment a mentőautóhoz.
Bajnokok Ligáját érhet, ez az edző veszi át a bajnok Győri ETO-t
Robbie Keane-t éppen a győri kiszemelt miatt akarták elcipelni egészen Pozsonyig.
Kellemetlen helyzetbe került Florentino Pérez, kikosarazta a Real Madridot a világsztár
A Bayern München kemény üzenetet küldött Michael Olisével kapcsolatban.
Előbb beszél Andoni Iraolával, utána dönt távozásáról a Liverpool klasszisa
Egy nagy visszatérés is benne van a pakliban.
Addig vár az FC Barcelona, amíg Rashfordot elviszi a világ egyik legjobb csapata
Sok a kérdés az angol válogatott jövőjével kapcsolatban.
Hivatalos ajánlat Ronald Araujóért, a Premier League-be igazolhat a Barca-sztár
A Tottenham 30 millió eurót fizetne érte.
Toroczkai László is ott volt a magyar-finn focimeccsen, így reagáltak a szurkolók a megjelenésére
Az elmúlt két hétben több fontos focimeccset is rendeztek a Puskás Arénában, több politikus is megjelent ezeken.
80 millió euróért kezdte árulni világsztárját az FC Barcelona
Bevételt akarnak generálni a katalánok.
Olaszországba igazolt a magyar bajnok ETO FC játékosa
Esélyt kaphat a Serie A-ban.
Szoboszlai és Borka felrobbantotta a netet, szenvedélyes csókban forrtak össze
"Ez csak női válogatás lehet" - Meglepő kritikával szembesült a magyar válogatott sztárja.
Bulvár
Óriási közlést tett 10 perce Magyar Péter. Ez sok embert mélyen érint
Hatalmas fordulat következik be.
Foga és haja sincs már: Felismerhe-tetlenül él az utcán az egykor ünnepelt 43 éves bombázó
Felismerhetetlenné vált az egykor ünnepelt címlaplány, Loni Willison. A Baywatch sztárjának exneje ma Los Angeles utcáin él, a kukákból étkezik, és fogatlanul, kopaszon tolja maga előtt a holmiját.
Július 1-jétől betiltják a szemeteszsák használatát: már most figyelmeztetik a lakókat
Több településén szigorúbb hulladékkezelési előírásokat vezetnek be: egyre több városban nem engedélyezik, hogy a lakók műanyag zacskóban helyezzék a biohulladékot a gyűjtőedényekbe.
Személyesen Orbán támadta, most figyelmezteti a befektetőket: a piac hisz Magyar Péternek, de most már tettekre van szükség
A NER már nincs velünk, Németh Dávid és a K&H viszont nagyon is. A szakértővel a magyar euró, a forint-rali, és az állampapírpiac jövője is terítékre került.
Két egyszerű fagyit kértek elvitelre, 17 ezer forintos számlát kaptak a gyanútlan turisták
A gyanútlan utazók megkopasztására szakosodott vendéglátósok idén is gőzerővel dolgoznak a legnépszerűbb európai városokban. Egy floridai nő brutális összegű számlát kapott két egyszerű fagylaltért. [Banners
15 év után hívták be az elemzőt a köztévébe, nem akármilyen mondattal nyitott
A kormányváltás után a köztévén átalakulások kezdődtek, ezt pedig sokan észre is vették, néha meglepő fordulatokkal indulnak a beszélgetések.
Titokban összeházasodott az RTL és a TV2 sztárja: gyönyörű párt alkottak az esküvőjükön
Titokban megtartotta álomesküvőjét Czibolya Niki és Filipáncs Bálint. Görgess tovább a képekért.
Ez a halála előtti utolsó kép Petőfi Sándorról, teljesen máshogy nézett ki, mint ahogy látjuk a tankönyvekben
Petőfi Sándorról élete során több kép és festmény is készült, az utolsó 1849-ben, nem sokkal a halála előtt.
Brutális mit hagyott maga után az Orbán-kormány
Megjelent az új pénzügyi tárca első beszámolója. E szerint május végén a költségvetési törvényben szereplő éves hiánycél 90,2 százaléka már teljesült. A számokon jól látszik az Orbán-kormány választás
Iszonyatos adósság dőlhet a magyar állam nyakába, ha átveszik a hazai óriáscéget: tényleg megéri ez?
Amennyiben az állam átvenné a tulajdonosi jogokat, a tőkepiaci szabályozás értelmében kötelező nyilvános vételi ajánlatot kellene tennie a többi részvényesnek.
Ez már a Tisza-hatás? Váratlanul nagyot estek az árak a boltokban
Kedvezően alakultak az élelmiszerárak az új kormány hivatalba lépését követő első hónapban.
Napelemből építik a kerítést, mert olcsóbb, mint a fa
Új trendet teremtett a globális túlkínálat.
- Csökkent a gázolaj ára
- Leszakadt egy vasúti felsővezeték Érdnél, jelentős késésekre kell számítani
- NAV: sok változást hoz a jövedéki szabályozásban az új törvény
- Az E.ON nevével visszaélve téveszthetik meg a lakosságot
- Így úszható meg a hosszú várakozás a horvát autópálya-kapuknál
- A talált madárfiókák többsége nem árva, nem szorul megmentésre, ne szedjük össze őket!
- Már csak pár napig lehet pályázni az ingyen falfestékre
- Hosszú hétvégi változások, kedvezmények a vasúton
- Online térképen láthatóak a tervezett áram- és gázszünetek az E.ON oldalán
- Nagy összegű készpénzzel érkezik az Európai Unióba? Akkor erre figyeljen!
- Szombaton hat helyszínen lesz Retro Véradás
- Lezárásokra, forgalomkorlátozásokra kell készülni ma és holnap Budapesten
- Óvjuk adatainkat úgy, mint a pénztárcánkat
