A pókerban is jobbak a számítógépek
A sakk és a go után immár a pókert is meghódította a mesterséges intelligencia: a DeepStack pókerprogram eddig az összes profi emberi játékost megverte, aki kiállt ellene.
Az Albertai Egyetem (Kanada) Számítógépes Póker Kutatócsoportjának legújabb fejlesztése, a DeepStack névre keresztelt mesterségesintelligencia-rendszer a professzionális póker világának nehézfiúit darálta be egy összesen 3000 leosztásból álló, négy hétig tartó játszmasorozatban. Ezzel a mesterséges intelligencia (MI) újabb jelentős trófeát aratott azok után, hogy számítógépes programok a sakk és a go emberi nagymestereit már korábban maguk mögé utasították. A pókerprogramot alkotó albertai kutatócsoport, melynek tagjai között a prágai Károly Egyetem és a Cseh Műszaki Egyetem munkatársai is szerepeltek, a Science folyóiratban adott hírt a történelmi győzelemről.
A póker nagy kihívás az MI számára
A póker a sakkhoz, a dámához és a góhoz képest egészen más feladattal szembesíti az MI-t. A táblajátékok esetében mindkét játékos teljesen tisztában van a játék állásával, a rendelkezésükre álló információ tehát teljes és szimmetrikus eloszlású.
A póker egészen más tészta: itt egyik játékos se ismeri a másik lapjait, ezért mindketten tökéletlen és aszimmetrikus eloszlású információ alapján kénytelenek döntéseket hozni. Ráadásul a póker szóban forgó változata, a Texas hold'em heads-up no-limit variánsa olyan komplex, hogy minden játékmenet során 10160 (egy egyes, utána százhatvan nullával) döntési pont adódik. Ez a szám messze nagyobb, mint ahány atom van a világegyetemben; ilyen feltételek mellett az összes lehetséges döntés végigelemzése nyilvánvalóan nem opció.
A számítógépnek ezért az „intuícióját" kell használnia, amelyet mély tanulási algoritmusok segítségével fejleszt. Ahelyett, hogy egészen a játék végéig megpróbálná lefuttatni a helyzetek elemzését, az emberekhez hasonlóan csupán néhány lépéssel gondolkodik előre, és minden döntés után felülvizsgálja a stratégiáját. Ezzel a módszerrel a döntési pontok számát 10160-ról 107-re redukálja, és ennyi műveletet egy közönséges laptop processzora is 5 másodperc alatt elvégez.
„A póker régóta nagy kihívás volt az MI számára – mondta el Michael Bowling, az Albertai Egyetem természettudományos fakultásának tanára és a tanulmány vezető kutatója. – Ez a játék a tökéletlen információ iskolapéldája, amennyiben a játékosok nem ugyanahhoz az információhoz férnek hozzá, és nem ugyanabból a perspektívából nézik a játékot.
" Bár pókerról lévén szó mindvégig játékról beszélünk, a tökéletlen információs játék valójában véresen komoly ügy: a vele foglalkozó matematikai modellek írják le a legjobban azt, ahogyan döntéshozó ágensek kölcsönhatnak a való életben. „Új MI technikákra van szükségünk azoknak a helyzeteknek a kezelésére, amelyekben a döntéshozók eltérő szemszögből látják az eseményeket" – állítja Bowling, hangsúlyozva, hogy a tökéletlen információs játékokat megoldó MI algoritmusok alkalmazhatósága messze túlmutat a kaszinók világán. – „Gondolhatunk szinte bármilyen valós problémahelyzetre. Valamennyi résztvevő kissé másmilyen perspektívából szemléli a helyzetet, ugyanúgy, ahogy a pókerjátékosok is csak a saját lapjaikat ismerik." Bowling szerint egyebek mellett a megfelelő orvosi kezelések kiválasztása és a védelmi stratégiák tervezése terén kínálkoznak a legkézenfekvőbb alkalmazások.
Profikat győzött le
A kanadai programozók nem ma kezdték a tökéletlen információs játékokkal való birkózást. Az Albertai Egyetemen 1996-ben állt fel a Számítógépes Póker Kutatócsoport, amelyet 2006 óta Bowling vezet. 2008-ban a csoport kifejlesztette a Polaris nevű programot, amely a Texas hold'em póker egy kevésbé komplex változatát, a heads-up limitet játszotta, és ebben a versenyszámban győzte le sorra a játék emberi bajnokait. Ezt követte a 2015-ben publikált Cepheus, majd a 2016-ban debütált DeepStack.
„A felkészülés során a rendszerünknek megtanítjuk az egyes állásokhoz rendelhető értéket – magyarázza Bowling. – Minden helyzet maga is egy mini-pókerjátszma. Ahelyett, hogy a program egy nagy pókerjátszmát oldana meg, kis játszmák millióit elemzi végig, s mindegyik elemzés tovább csiszolja az intuícióját arról, hogyan is működik a póker. És ez az intuíció hajtja előre a DeepStack-et az egész játék során."
Az olyan komplex problémák kezelésében, mint a heads-up no-limit hold'em, fontos az éppen felmerülő szituációk értékelése. Annak köszönhetően, hogy a program csak belátható mélységben gondolja mindig újra a stratégiát, az egyes döntések a játék bonyolultsága ellenére is emberi időléptékben zajlanak. A 3-5 másodperces gondolkodási időt egy teljesen közönséges, Nvidia grafikus processzorral felszerelt laptop is könnyűszerrel tudja tartani.
A DeepStack megmérettetésére tavaly decemberben került sor, amikor a Nemzetközi Pókerszövetség 17 ország 33 játékosát kérte fel az MI-rendszerrel való erőpróbára. A játékosokat arra kérték, hogy négy hét leforgása alatt egy 3000 leosztásból álló játszmasorozatot játsszanak a számítógéppel. Végül csak 11-en játszották végig a teljes sorozatot; a DeepStack valamennyiüket megverte, egy kivétellel statisztikailag szignifikáns mértékben. Ezzel a DeepStack lett az első számítógépes program, amely professzionális játékosokat győzött le a heads-up no-limit Texas hold'em pókerban.
hírek innen, onnan
Lecsúszó nyugdíjasok, Nők40, 13. és 14. havi nyugdíj - Mit csinált a Fidesz 16 év alatt a nyugdíjakkal?
A Fidesz nagyon komoly szigorításokkal kezdett, kedvezmények sorát vonta meg, majd a svájci indexálás megszüntetésével rendszerbe...
Csoportosan mondtak fel az orvosok a Bajcsy-kórházban: egyszerre 7-en is távoznak
A kórház közlése szerint a felmondások nem veszélyeztetik a betegellátást.
A Jobbik egyes képviselőjelöltjei több érvénytelen ajánlást adtak le, mint ahány érvényeset
Az NVI több esetben szabálytalanságot talált, és feljelentések is születtek.
Végtelenül szomorú Krausz Gábor is. Tegnap este jelentették be, hogy vége. Éppen az utolsó pillanatban derült ki a Séfek séfe műsorából
Vége nincs tovább. Mindenki elkeseredett, de sejteni lehetett ezt.
Megmérgezte férjét, majd gyermekkönyvet írt a gyász feldolgozásáról egy amerikai nő
A fekete özvegy akár élete végéig rácsok mögött maradhat.
A Házasság első látásra sztárja elárulta, miért állított be drogteszttel az exéhez: kitálalt a szakításukról - csúnya sztori
Gaál Zoltán, a Házasság első látásra című műsor második évadának szereplője részletesen reagált azokra a vádakra, amelyek a...
Most már tényleg napokon belül összejöhet a Mol-nak a NIS-üzlet
Magyar Levente szerint a Mol és a Gazprom Neft közötti megállapodás a NIS orosz részesedésének megszerzéséről napokon, legfeljebb...
Kutatók: a Békemeneten 58 ezren hallgatták Orbánt, a Nemzeti Meneten 162 ezren Magyart
Tudományos módszerekkel megbecsülték a március 15-ei politikai felvonulások méretét.
Majkopot támadta Ukrajna, elakadtak a béketárgyalások - Szerdai híreink az ukrán frontról, percről percre
Dróntámadás érte Majkopot, Adigeföld székhelyét, Oroszország területén. Moszkva Kurszkot és Odesszát támadta nagy hatótávolságú...
Riasztó trend terjed a tinik között: súlyos elváltozást okoz
Egyre több szakember figyelmeztet arra, hogy a videojátékokkal töltött hosszú órák már a gyerekek egészségén is nyomot hagynak. A...
Állandóan fáradt vagy? Ez az 5 természetes élénkítő segíthet
Nem a kávé az egyetlen mindennapokban is használható élénkítő a fáradság ellen, ám érdemes tájékozódni, hogy személy szerint...
Lakástűzben halt meg egy idős férfi és egy nő Sajókazán
A katasztrófavédelem szerint fűtőeszköz miatt keletkezhetett tűz az ikerházban.
Sport
Kovács István körül áll a bál, az eltiltásáról és a lefokozásáról írnak Romániában
A nagykárolyi születésű játékvezető a héten csak az Európa-ligában fújja a sípot, csütörtökön az AS Roma–Bologna meccsen.
Csoda a Bajnokok Ligájában: Idegenben 0–3, hazai pályán 5–0 és történelmi továbbjutás
A Sporting hősies fordítás után ott van a legjobb nyolc között a Bajnokok Ligájában.
Körvonalazódik a megoldás? Irán egyetlen feltételhez kötötte világbajnoki részvételét
A közel-keleti ország már tárgyal a FIFA-val.
A Liverpoolt emlegető Guardiola Rüdigerrel balhézott, Vinícius megindokolta a gúnyolódását
Álvaro Arbeloa a piros lapról és Thibaut Courtois sérüléséről is beszélt a Manchester City–Real Madrid BL-visszavágó után.
A „síró" Vinícius lövését piros lap követte, Courtois sem fejezte be a Real Madrid meccsét
A három angol csapatból egy jutott negyeddöntőbe a labdarúgó Bajnokok Ligája keddi játéknapján.
Marco Rossi kihirdette keretét márciusra, a Barcelona kapusa is a három újonc között
A labdarúgó-válogatott Szlovéniát és Görögországot fogadja a Puskás Arénában.
Rüdiger a fejen térdelt ellenfelének üzent: Ha bántani akartam volna, nem kelt volna fel a földről
Először szólalt meg a szabálytalansággal kapcsolatban a Real Madrid védője.
370 ezer forint a legdrágább, 27 ezer a legolcsóbb jegy a budapesti BL-döntőre
Az UEFA hivatalos közleménye szerint itt vannak a budapesti Bajnokok Ligája-döntő árai.
Iszonyatos mélységből a csúcsra: a világ 16 legjobb csapata között Magyarország
A magyar női kosárlabda-válogatott az elmúlt négy év alatt megjárta a poklot, de most tényleg a mennyországba jutott.
Az egyik magyar focista sorsa már eldőlt a Liverpool sorsdöntő BL-meccse előtt?
A Liverpool edzőjét kirúghatják, ha csapata elbukja a Galatasaray elleni BL-párharcot.
Sporting–Bodö/Glimt: mit mutatott a VAR és mit nézett a játékvezető? Háborognak a norvégok
A Bodö/Glimt játékosai először el sem hitték, hogy a bíró büntetőt fog ítélni a Sporting javára a második félidőben.
Bulvár
Elindult a pánikvásárlás? Valamire készülnek a magyarok, óriási a kereslet a gázpalackok iránt
Kilőtt a kereslet Magyarországon.
Kovács István körül áll a bál, az eltiltásáról és a lefokozásáról írnak Romániában
A nagykárolyi születésű játékvezető a héten csak az Európa-ligában fújja a sípot, csütörtökön az AS Roma–Bologna meccsen.
Ukrán pénzszállítók: Lázár János elszólása miatt kerülhet bajba a kormány
Hivatali visszaélés, jogellenes fogvatartás és terrorcselekmény gyanúja miatt feljelentést tett az ukrán fél.
Dermesztő titkokat fecsegett ki Várkonyi Andreáról a legjobb barátnője, meghökkentő dolgokat állít
Kamerák előtt vallotta be a barátnő, hogy mit gondol Várkonyi Andreáról.
Az egész családját lerajzolta a kisfiú - a nagynénje fülig elvörösödött, amikor meglátta magát a kész alkotáson
Vajon mit árulnak el a rajzok a gyermekek személyiségéről, lelkivilágáról, érzelmeiről? Nos, ahogy most következő történetünk is bizonyítja, jóval többet, mint elsőre hinnénk.
Gigantikus botrány, Mészáros Lőrinc képei sorakoznak az ukrán-magyar határon
A választások előtt nem jött ez jól Mészáros Lőrincnek.
Schadl György mutatott egy képet a telefonján, és minden megváltozott
Az Igazságügyi Minisztérium dolgozóit hallgatta meg a bíróság.
Zelenszkij kapitulált: győzött a józan ész
Fordulat az utolsó pillanatban: az EU-csúcs előtt Ukrajna beadta a derekát és Zelenszkij kapitulált, ami fordulatot hozhat az olajháborúban. Az elmúlt hetek intenzív diplomáciai egyeztetései végül eredményt hoztak
Drámai válasz. Megkérdezték Orbán Viktortól, felkészült-e hazánk egy ukrán fegyveres támadásra
A Magyar Honvédség felkészült az ország védelmére, vélekedik a szakminiszter államtitkára. Azt viszont nem tudni, mennyi óvóhely van Magyarországon.
Teljes a készültség a frankfurti repülőtérnél, halálos áldozatok is vannak
Az elkövető szökésben van. Két halálos áldozata is van a frankfurti repülőtérnél kirobbant lövöldözések.
Pánikvásárlás indult a boltokban: ezt veszik a magyarok
Tömegek keresik az alternatív megoldásokat arra az esetre, ha kifogyna a gáz vagy az üzemanyag.
15 éves ikerlányaival állították meg a sóshartyáni apát: amit a kocsiban találtak, azért előzetesbe is került
A rendőrség még mindig nagy erőkkel nyomoz a Delta program keretében: ez a nógrádi édesapa ennek az áldozata. De a két lánya is, akikkel épp együtt autókázott.
blogmorzsák
Jegyet vettél, de változott a program?
Mire számíthatunk, ha a kifizetett program nem a meghirdetettek szerint valósul meg?
Így őrizd meg az intimzónád fittségét
Menopauza után is.

- Csökkent a gázolaj ára
- Leszakadt egy vasúti felsővezeték Érdnél, jelentős késésekre kell számítani
- NAV: sok változást hoz a jövedéki szabályozásban az új törvény
- Az E.ON nevével visszaélve téveszthetik meg a lakosságot
- Így úszható meg a hosszú várakozás a horvát autópálya-kapuknál
- A talált madárfiókák többsége nem árva, nem szorul megmentésre, ne szedjük össze őket!
- Már csak pár napig lehet pályázni az ingyen falfestékre
- Hosszú hétvégi változások, kedvezmények a vasúton
- Online térképen láthatóak a tervezett áram- és gázszünetek az E.ON oldalán
- Nagy összegű készpénzzel érkezik az Európai Unióba? Akkor erre figyeljen!
- Lezárásokra, forgalomkorlátozásokra kell készülni ma és holnap Budapesten
- Óvjuk adatainkat úgy, mint a pénztárcánkat
- Két hétvégén is változik a vonatok közlekedési rendje


