Neuronová síť AlphaGo v posledních dvou letech porazila nejlepší experty ve hře go, a tak se zprvu zdálo, že laboratoř DeepMind, která dnes patří Googlu, program ukončí jako úspěšný a získané technologie využije zase v jiném oboru.
Článek publikovaný v časopisu Nature však ukazuje, že se věci mají trošku jinak a AlphaGo ještě má co říci. Jeho nová verze AlphaGo Zero je totiž poměrně unikátní.
Když se A.I. naučí hrát go, aniž by kdy viděla jakoukoliv jinou hru
Jak se zdokonalovaly tři různé verze AlphaGo: AlphaGo Lee je ta, která porazila nejlepšího hráče na světě. Supervised learning představuje síť, která se učila analýzou záznamů hromady lidských her (a vychází z ní právě verze Lee) a konečně reinforcement learning představuje novinku Zero, která na začátku nic neumí a nemá k dispozici žádná studijní data, jen základní pravidla, nicméně se učí hrou se sebou samotnou. Během několika desítek hodin překonala všechny předchozí verze.
I Zero porazí všechny hráče, ale přesto je o celý vesmír lepší než její předchůdci. Jak je to možné? Zatímco všechny ostatní verze se strojově učily na základě analýzy hromady her lidských a později strojových hráčů (tzv. supervised learning), AlphaGo Zero je jedním z prvních střípků do skládačky jménem univerzální A.I.
Síť Zero se totiž začala učit jen se znalostí základních herních pravidel – tedy asi tak, jako byste dostali k Vánocům šachy a návod ke hře, nicméně byste v životě neviděli žádný reálný mač... A za pár hodin by se z vás stal nejlepší hráč světa.
AlphaGo Zero se tedy začala učit od naprosté nuly a už po třech dnech poprvé překonala verzi, která v minulosti porazila nejlepší lidské hráče. Zhruba po měsíci nakonec dosáhla 90% úspěšnosti.
Právě v tomto je skrytý svatý grál strojového učení budoucnosti, to současné totiž sice odvede v mnoha úkolech skvělou práci, ale potřebujete velmi kvalitní studijní data a musíte jich mít dostatek, což v mnoha případech není vůbec jednoduché, a proto si se strojovým učením pohrávají hlavně ti, kteří tato data mají – Facebook a Google.
Podívejte se, jak se A.I. učí ve virtuálním světě zdolávat překážky: