Nvidia umí téměř dokonale zpomalit video. Chybějící snímky dopočítají neuronové sítě

Nvidia umí téměř dokonale zpomalit video. Chybějící snímky dopočítají neuronové sítě

Nvidia přišla na to, jak zjemnit a zpomalit video pro vyšší detail, aniž by chyběly snímky. Jednoduše je umělé dopočítá pomocí neuronových sítí a strojového učení. Nejedná se o unikátní technologii, s podobnými experimenty si hrají i ostatní včetně Googlu, Nvidia se nicméně pochlubila povedenou ukázkou, co její software dokáže.

Nvidia zpomaluje video pomocí technik A.I.

V kostce jde o to, že pro přehrávání plynulého zpomaleného videa potřebujete více než třicet snímků za sekundu. Nvidia přichází se zajímavým nápadem: počet snímků zvýší a jejich obsah „dopočítá“ pomocí umělé inteligence. V tomto konkrétním příkladu vytvoří algoritmus využívající metody hlubokého učení z každého snímku sedm dalších. Tím vzroste snímkovací frekvence ze 30 fps na 240 fps, což už stačí pro překvapivě dobře působící zpomalené video.

Systém funguje poměrně předvídatelně: umělá inteligence nejprve porovná dva sousední snímky a na základě zjištěných rozdílů dopočítá a vygeneruje obsah sedmi dalších. I když výsledky nemusí být za všech okolností dokonalé, je produkce poměrně přesná a lidský mozek obvykle není schopen zaznamenat rozdíl proti zpomalenému videu, natočenému konvenční cestou. Přesvědčit se můžete v následujícím oficiálním klipu, kde je na několika příkladech porovnáváno manuálně zpomalené video a výsledky počítačového zpracování.

Zpomalené video

Zpomalené video je jedním ze současných hitů nejen v segmentu chytrých telefonů. Zpravidla je zaznamenáváno tak, že fotoaparát pořizuje snímky velmi vysokou frekvencí – například Samsung Galaxy 9 při 960 fps. Pro přehrávání je pak používáno obvyklých 30 fps, čímž se záznam zpomalí. Pokud video natočíte s použitím běžné snímkovací frekvence, zpomalit ho nelze (respektive lze, ale nevypadá to dobře).

Pro komerční využití bude proces zpracování zpomalených videí vyžadovat ještě další vylepšení. Poté by se mohl prosadit v segmentu chytrých telefonů, kde takové zpomalené video bude stačit. Klesly by tak nároky na parametry fotoaparátu a tolik oblíbené „slow-mo“ by bylo možné točit i s podstatně levnějším hardwarem.

Další nespornou výhodou je možnost vytvořit zpomalené video z již natočených materiálů. To by v konečném důsledku znamenalo možnost využívat tuto funkci i na zařízeních, jež nativně zpomalené video nepodporují.

Zatím ale není důvod k přílišnému optimismu. Systém zpomaleného videa od Nvidie má totiž svá omezení. Výzkumníci ho pomocí hlubokého učení museli „vycvičit“ v 11 000 klipech na konkrétní situace.

To znamená, že aby si umělá inteligence poradila se zpomaleným záběrem auta ve smyku, musela si to nejprve natrénovat na podobné situaci. Bez relevantních dat je v podstatě nemožné předvídat pohyb a chování objektů v obraze.

Každopádně technologie Nvidie působí podstatně jednodušeji a levněji než stávající metody pro pořizování zpomaleného záznamu. Pokud se povede naučit zpracování nejběžnějších situací, mohla by se díky tomu v blízké budoucnosti objevit jako standardní funkce fotoaparátů v telefonech.

Diskuze (21) Další článek: Google spustil samostatnou aplikaci pro poslech podcastů. Najdete v ní i český obsah

Témata článku: Google, Umělá inteligence, Nvidia, Strojové učení, Samsung, Neuronová síť, Fotoaparát, Snímkovací frekvence, Frekvence, Natočený materiál, Unikátní technologie, Podobný experiment, Chytrý telefon, Počítačové zpracování, Zpomalené video, Komerční využití, Levný hardware, Blízká budoucnost, Hluboké učení, Zpomalený záběr, Vysoká frekvence, Standardní funkce, FPS, Přílišný optimismus, Konečný důsledek


Určitě si přečtěte

Šmírování kamerami Googlu: Koukněte se, co zachytily na Street View

Šmírování kamerami Googlu: Koukněte se, co zachytily na Street View

Google stále fotí celý svět do své služby Street View. A novodobou zábavou je hledat v mapách Googlu vtipné záběry. Podívejte se na výběr nejlepších!

redakce | 44

Jak funguje největší akumulátor v Česku: podívejte se do elektrárny Dlouhé Stráně

Jak funguje největší akumulátor v Česku: podívejte se do elektrárny Dlouhé Stráně

** Přečerpávací vodní elektrárna Dlouhé stráně je obdivuhodné technické dílo ** Stejná turbína vyrábí elektřinu i tlačí vodu zpět do horního jezera ** Strojovna elektrárny je zabudována v podzemí

David Polesný | 34

Portál občana už funguje. Na státní web vypadá až překvapivě použitelně

Portál občana už funguje. Na státní web vypadá až překvapivě použitelně

** Portál občana už funguje, vyřídíte na něm první požadavky ** Funkce se budou postupně rozšiřovat ** Web je docela moderní a přehledný

David Polesný | 66

Modelářský zázrak: Maketa raketoplánu Columbia, která létá jako skutečná raketa

Modelářský zázrak: Maketa raketoplánu Columbia, která létá jako skutečná raketa

** Model raketoplánu Columbia od českého konstruktéra umí i létat ** Obdivuhodný model si vzal 1600 hodin práce ** Podívejte se na fotografie ze stavby a prvního letu

Karel Jeřábek | 20

Osudová havárie Concordu: Před 18 lety přišel konec nadzvukových dopravních letadel

Osudová havárie Concordu: Před 18 lety přišel konec nadzvukových dopravních letadel

** Concorde byl nejrychlejším dopravním letadlem ** Atlantik dokázal přeletět za cca 3 až 3,5 hodiny ** Před osmnácti lety tragická havárie provoz těchto letadel prakticky ukončila

David Polesný, Jiří Černý | 37

Nvidia představila nové grafické karty GeForce RTX. Nastavila šílené ceny a chce přesvědčit ray tracingem

Nvidia představila nové grafické karty GeForce RTX. Nastavila šílené ceny a chce přesvědčit ray tracingem

** Nvidia představila nové desktopové herní grafické karty GeForce RTX ** Tři modely se pyšní masivním výkonem pouze ve spojení s ray tracingem ** Ceny jsou mnohem vyšší než u předchozích generací

Karel Javůrek | 106

Nový iPhone a další novinky Applu: sledujte, na co se zase budou stát fronty

Nový iPhone a další novinky Applu: sledujte, na co se zase budou stát fronty

** Apple dnes představuje nové produkty v čele s novými iPhony ** Nemusí zůstat jen u telefonů, čekají se i další novinky ** Úvodní přednáška začíná v 19:00 našeho času

David Polesný | 57


Aktuální číslo časopisu Computer

Megatest: 13 grafických karet

Srovnání 7 dokovacích stanic s USB-C

Jak na perfektní noční fotografie

Kvalitní zdroje informací pro sebevzdělávání