Nvidia umí téměř dokonale zpomalit video. Chybějící snímky dopočítají neuronové sítě

Nvidia umí téměř dokonale zpomalit video. Chybějící snímky dopočítají neuronové sítě

Nvidia přišla na to, jak zjemnit a zpomalit video pro vyšší detail, aniž by chyběly snímky. Jednoduše je umělé dopočítá pomocí neuronových sítí a strojového učení. Nejedná se o unikátní technologii, s podobnými experimenty si hrají i ostatní včetně Googlu, Nvidia se nicméně pochlubila povedenou ukázkou, co její software dokáže.

Nvidia zpomaluje video pomocí technik A.I.

V kostce jde o to, že pro přehrávání plynulého zpomaleného videa potřebujete více než třicet snímků za sekundu. Nvidia přichází se zajímavým nápadem: počet snímků zvýší a jejich obsah „dopočítá“ pomocí umělé inteligence. V tomto konkrétním příkladu vytvoří algoritmus využívající metody hlubokého učení z každého snímku sedm dalších. Tím vzroste snímkovací frekvence ze 30 fps na 240 fps, což už stačí pro překvapivě dobře působící zpomalené video.

Systém funguje poměrně předvídatelně: umělá inteligence nejprve porovná dva sousední snímky a na základě zjištěných rozdílů dopočítá a vygeneruje obsah sedmi dalších. I když výsledky nemusí být za všech okolností dokonalé, je produkce poměrně přesná a lidský mozek obvykle není schopen zaznamenat rozdíl proti zpomalenému videu, natočenému konvenční cestou. Přesvědčit se můžete v následujícím oficiálním klipu, kde je na několika příkladech porovnáváno manuálně zpomalené video a výsledky počítačového zpracování.

Zpomalené video

Zpomalené video je jedním ze současných hitů nejen v segmentu chytrých telefonů. Zpravidla je zaznamenáváno tak, že fotoaparát pořizuje snímky velmi vysokou frekvencí – například Samsung Galaxy 9 při 960 fps. Pro přehrávání je pak používáno obvyklých 30 fps, čímž se záznam zpomalí. Pokud video natočíte s použitím běžné snímkovací frekvence, zpomalit ho nelze (respektive lze, ale nevypadá to dobře).

Pro komerční využití bude proces zpracování zpomalených videí vyžadovat ještě další vylepšení. Poté by se mohl prosadit v segmentu chytrých telefonů, kde takové zpomalené video bude stačit. Klesly by tak nároky na parametry fotoaparátu a tolik oblíbené „slow-mo“ by bylo možné točit i s podstatně levnějším hardwarem.

Další nespornou výhodou je možnost vytvořit zpomalené video z již natočených materiálů. To by v konečném důsledku znamenalo možnost využívat tuto funkci i na zařízeních, jež nativně zpomalené video nepodporují.

Zatím ale není důvod k přílišnému optimismu. Systém zpomaleného videa od Nvidie má totiž svá omezení. Výzkumníci ho pomocí hlubokého učení museli „vycvičit“ v 11 000 klipech na konkrétní situace.

To znamená, že aby si umělá inteligence poradila se zpomaleným záběrem auta ve smyku, musela si to nejprve natrénovat na podobné situaci. Bez relevantních dat je v podstatě nemožné předvídat pohyb a chování objektů v obraze.

Každopádně technologie Nvidie působí podstatně jednodušeji a levněji než stávající metody pro pořizování zpomaleného záznamu. Pokud se povede naučit zpracování nejběžnějších situací, mohla by se díky tomu v blízké budoucnosti objevit jako standardní funkce fotoaparátů v telefonech.

Diskuze (21) Další článek: Google spustil samostatnou aplikaci pro poslech podcastů. Najdete v ní i český obsah

Témata článku: Google, Umělá inteligence, Nvidia, Strojové učení, Samsung, Neuronová síť, Fotoaparát, Pořizování, Zajímavý nápad, Vysoká frekvence, Konečný důsledek, Natočený materiál, Počítačové zpracování, Zpomalené video, Smyk, Zpomalený záběr, Standardní funkce, Hluboké učení, Blízká budoucnost, Inteligence, Chytrý telefon, Lidský mozek, Relevantní data, FPS, Vysoký detail


Určitě si přečtěte

Windows 10 už jsou na 700 milionech počítačů, ale není to jen labutí píseň?

Windows 10 už jsou na 700 milionech počítačů, ale není to jen labutí píseň?

** Windows 10 překonaly hranici 700 milionů instalací ** To je úctyhodné číslo a miliarda se blíží ** Analýzy ale i tak ukazují proměnu, jak používáme počítače a mobily

Jakub Čížek | 50

Pojďme programovat elektroniku: Když už vás ten chumel součástek prostě nebaví

Pojďme programovat elektroniku: Když už vás ten chumel součástek prostě nebaví

** Levné cetky z Asie stojí dolar ** Postavíte s nimi skoro vše od teploměru po spínač zavlažování ** Má to ale jeden háček. Bude to ošklivé a povětšinou nekvalitní

Jakub Čížek | 16

Velká podzimní aktualizace: Co nového teď najdete ve Windows 10

Velká podzimní aktualizace: Co nového teď najdete ve Windows 10

** Microsoft se opět snaží spojit telefony a počítače. ** Místo velkých novinek se zaměřil spíše na drobná vylepšení. ** Vyhledávání je konečně použitelné a hledá téměř všude.

Vladislav Kluska | 79

Říjnová aktualizace způsobuje na počítačích HP „modrou obrazovku smrti“

Říjnová aktualizace způsobuje na počítačích HP „modrou obrazovku smrti“

** Uživatelé hlásí další problémy s kumulativní aktualizací KB4464330 ** Na některých počítačích HP končí update „modrou obrazovkou smrti“ ** Na vině je patrně ovladač klávesnice

Karel Kilián | 79

Podívejte se, co se stane, když dron DJI Phantom narazí do křídla letadla

Podívejte se, co se stane, když dron DJI Phantom narazí do křídla letadla

** Co se může stát, když relativně maličký dron narazí do křídla letadla? ** Tuto otázku zodpověděli odborníci laboratorním pokusem ** Kvadrokoptéra způsobila významné poškození křídla

Karel Kilián | 17


Aktuální číslo časopisu Computer

Odhalte skryté funkce Windows 10

Test levných Androidů do 4 000 Kč

Srovnání úsporných minipočítačů

Změřili jsme rychlost 10Gb/s ethernetu