Ikona děvčat ze série Twilight umí uhranout i vědce. Pro svůj film použila strojové učení

Kristen Stewartová ztvárnila jednu z hlavních rolí v upírské sérii Twilight, která svého času uhranula každé náctileté děvče od New Yorku pro Brno. Snad i proto vzbudila na internetu pozornost zprávička, že Kristen umí nejen točit pro holky, ale i psát pro vědce, aktuálně se totiž může pochlubit spoluautorstvím studie publikované v akademickém archivu Arxiv.

Jmenuje se Bringing Impressionism to Life with Neural Style Transfer in Come Swim a Kristen v ní společně s producentem ze Starlight Studios Davidem Shapiro a výzkumníkem Bhaitikem J. Joshim z Adobe popisují, jak použili strojové učení pro přenos grafického stylu z impresionistické kresby na krátkometrážní snímek Come Swim.

Klepněte pro větší obrázek
Přenesení grafického stylu kresby uprostřed na vstupní filmové okénko pomocí modelu strojového učení

Obecná technika neural style transfer, kterou si třeba s pomocí Google TensorFlow a modelů vystavených na GitHubu můžete vyzkoušet i vy, funguje následovně.

Nejprve potřebujete výkonný počítač se strojovým učením, které projde pixel po pixelu modelovou malbu a naučí se její kompletní charakteristiku – tedy jak vypadají linky, stíny, barvy. Prostě vše.

Hotový model pak lze aplikovat na jakoukoliv vstupní grafiku a neuronová síť na ni opět naučený styl. Na první pohled to tedy vypadá, jako byste na fotografii aplikovali běžný a často krajně kýčovitý barevný styl, ve skutečnosti se ale za vším skrývají hodiny náročných výpočtů.

Kristen společně s experty stejným způsobem upravila barvy svého sedmnáctiminutového snímku, a je tak jednou z prvních, která pro grafický postprocessing použila počítačovou neuronovou síť.

Podobná technika přenesení stylu pomocí modelu pro strojové učení TensorFlow

Na GitHubu narazíte třeba na projekt Fast Style Transfer studenta Logana Engstroma z MIT, který spojil několik dalších prací k tomu, aby mohl použít hromadu modelů pro TensorFlow, které se pokoušejí přenést grafický styl z maleb slavných autorů na vaši fotografii. Takhle pak ono přenesení vypadá v praxi:

Klepněte pro větší obrázek
Vstupní fotografie
Klepněte pro větší obrázek Klepněte pro větší obrázek
Edvard Munch, Výkřik přenesený na moji fotografii
Klepněte pro větší obrázek Klepněte pro větší obrázek
Leonid Afremov, Rain Princess přenesená na moji fotografii
Klepněte pro větší obrázek Klepněte pro větší obrázek
Hokusai, The Great Wave off Kanagawa přenesená na moji fotografii
Klepněte pro větší obrázek Klepněte pro větší obrázek
Francis Picabia, Udnie přenesená na moji fotografii

Témata článku: Technologie, Věda, Umělá inteligence, Strojové učení, Hudba, filmy, seriály, Neuronová síť, Bulvár a vtípky, Zajímavosti, Adobe, TensorFlow, Logan, Princess, Transfer, Twilight, Vědec, Hotový model

6 komentářů

Nejnovější komentáře

  • Lukáš Hofman 23. 1. 2017 19:22:56
    Jestli je tohle idol děvčat, tak potom chápu ty kyselý xichty...
  • omnikor 23. 1. 2017 2:28:27
    Velmi zaujimavy clanok ale to naco bolo strojove ucenie pouzite som...
  • ehlo 20. 1. 2017 16:04:06
    "od New Yorku pro Brno" "a neuronová síť na ni opět naučený...
Určitě si přečtěte

Právě vychází nový Computer: trápí vás slabý signál Wi-Fi?

Právě vychází nový Computer: trápí vás slabý signál Wi-Fi?

** MESH Wi-Fi sítě jsou skvělé, ale drahé. Známe levnější řešení ** Otestovali jsme NVMe a SATA SSD ** Příjemně nás překvapily batohy do 2 000 Kč

Dnes | Časopis Computer

A je to tady: Legendární Flash Player končí. Z webu definitivně zmizí v roce 2020

A je to tady: Legendární Flash Player končí. Z webu definitivně zmizí v roce 2020

** Web už nebude, co býval ** Adobe oznámilo ukončení vývoje jedné z internetových legend ** Flash Player definitivně utichne do konce roku 2020

Včera | Čížek Jakub | 9