Google open source nástroj používaný na aktiváciu funkcií podobných režimu portrétu z Pixel 2

click fraud protection

Google zverejnil zdrojový kód pre DeepLab-v3, technológiu AI, ktorú možno použiť na aktiváciu Portrétu Režim fotoaparátu Google, ktorý umožňuje vývojárom používať rovnakú technológiu vo svojich vlastných aplikáciách pre iné aplikácie účely.

Aktualizácia 17:02 CST: Spoločnosť Google sa obrátila, aby objasnila, že samotná technológia režimu na výšku nie je otvorená zdrojov, ale skôr, že technológia, ktorá to umožňuje – sémantická segmentácia obrazu – je teraz otvorená zo zdrojov. Názov bol zmenený tak, aby odrážal túto opravu.

Väčšina ľudí súhlasí s tým, že rodina Pixel 2 má momentálne najlepšie fotoaparáty na akomkoľvek smartfóne. Samotný hardvér fotoaparátu je skvelý, no väčšina kúziel sa odohráva na strane softvéru. Napríklad funkcia HDR+ robí takmer každý fotoaparát lepší keď je to prenesené na iné telefóny. Nová softvérová funkcia na Pixel 2 je „Portrait Mode“. Identifikuje vás a rozostrí pozadie, čím vytvorí skvelý efekt.

Fotoaparát na to používa sémantickú segmentáciu obrazu. V podstate kategorizuje každý pixel štítkom ako „osoba“ alebo „obloha“. To pomáha fotoaparátu rozlíšiť medzi osobou v popredí a oblohou v pozadí. Google vydal túto technológiu ako open source, čo znamená, že vývojári môžu používať rovnakú technológiu vo svojich vlastných aplikáciách. Režim Portrét je len jedným z príkladov využitia tejto technológie. Vývojári dokážu urobiť ešte viac skvelých vecí.

Toto vydanie obsahuje modely DeepLab-v3+ postavené na výkonnej chrbticovej architektúre konvolučnej neurónovej siete (CNN) [2, 3] pre čo najpresnejšie výsledky, určené pre nasadenie na strane servera. V rámci tohto vydania navyše zdieľame náš tréningový a hodnotiaci kód modelu Tensorflow, as ako aj modely, ktoré už boli predtrénované na porovnávaciu sémantickú segmentáciu Pascal VOC 2012 a Cityscapes úlohy.


Zdroj: Google Research